国际新闻与传播实务 · 第四讲

AI辅助的传播效果分析和决策

以Running Mate × Rosé教学案例为主线,亲手完成一次混合设计ANOVA,并把统计证据转化为下一轮传播方案。

进入完整案例下载课堂数据

主讲人:杜云飞|建议课时:100分钟

从用户反馈到传播决策
01

CASE FILE · 01

Running Mate遇到的具体决策难题

新生品牌

Running Mate是一个以盲盒为核心产品的教学合成潮玩品牌,品牌认知与稳定用户群仍在建立。

DUNDUN Monkey

2025年推出新品系列。消费者在活动开始前已经接触品牌与新品,因此前测记录的是“知道产品之后”的状态。

Rosé合作推广

品牌邀请BLACKPINK成员Rosé进行为期一个月的合作推广,希望借助国际明星影响力放大新品关注。

管理层的问题:一个月后,关注究竟沉淀为更好的品牌态度、更强的购买意愿和更高的分享意愿了吗?
Running Mate、DUNDUN Monkey、合作活动、样本和数据均为教学合成材料;Rosé姓名用于构造课堂情境,不代表真实合作。
02

CASE FILE · 02

研究流程:比较同一批消费者在两个时间点留下的反馈

Pre · 合作推广前

情境:新品已经发布,受访者已经了解品牌及DUNDUN Monkey系列。

测量:品牌态度、购买意愿、口碑传播意愿。

Post · 推广一个月后

情境:同一批受访者再次评分,记录其在合作推广后的反应。

比较:观察每个人从Pre到Post改变了多少。

新品发布消费者认识产品
Pre测量建立比较基线
合作推广持续一个月
Post测量同一批人再评分
管理决策续投、分众、改内容
这个设计可以观察“前后变化”,但没有未接触活动的对照组,因此不宜把所有变化都归因于推广。
03

CASE FILE · 03

管理层需要确认的三个具体问题

是否续投入

三个指标是否整体提高?变化幅度能否支持下一轮继续投入明星合作?

证据:Time主效应

投向哪个群体

女性与男性消费者的变化幅度是否相同?是否需要进行受众分层?

证据:Time × Gender

后续的传播内容怎么样

品牌好感、购买还是分享,哪个环节改善更明显?下一轮内容应推动哪种行动?

证据:均值、效应量与交互图

课堂角色:你是品牌的数据与传播顾问。请根据分析明确:目前的传播效果如何,下一步的传播方案如何设计。
04

RESEARCH QUESTIONS

把管理层的疑问改写成可检验的问题

RQ1 · 整体变化

Rosé合作推广一个月后,同一批消费者的BA、PI和WOM是否显著提高?

对应Time主效应|回答“是否有变化”

RQ2 · 性别差异

Male与Female消费者从Pre到Post的变化幅度是否不同?

对应Time × Gender|回答“对谁变化更大”

决策问题:如果效果集中在某一人群或某一结果变量,下一轮预算、内容和测量怎样调整?
03

QUESTION–METHOD–DATA FIT

案例问题决定方法,方法决定数据结构

案例问题比较所需数据统计证据
推广后整体有变化吗?同一批人Pre/PostID配对的重复评分Time主效应
男女总体评分有差异吗?Male/Female每人只有一个GenderGender主效应
两组变化幅度不同吗?Time × Gender分组+重复测量交互效应
ANOVA回答“有没有差异”;第五讲用访谈与主题分析继续追问“差异为什么产生”。
04

2 × 2 MIXED DESIGN

一个被试内因素+一个被试间因素

Time · 被试内

同一消费者在Pre和Post测量两次。

2个时间点

Gender · 被试间

每人只属于Male或Female一组。

2个群体

Outcome · 因变量

BA、PI、WOM分别运行ANOVA。

3个结果

N=80:Male 39,Female 41;每人贡献Pre和Post两行。
05

DATA DICTIONARY

先看懂一行数据和一个分数

字段含义
ID同一ID应有Pre、Post两行
Gender被试间分组
Time被试内重复测量
BA1—BA4品牌态度,如“我对该品牌印象积极”
PI1—PI4购买意愿,如“我愿意购买该系列”
WOM1—WOM3口碑意愿,如“我愿意推荐或分享”

示例问项用于课堂理解;分析以Excel字段为准。

下载Excel

一位消费者的两行记录

ID Gender Time BA1 … WOM3
1 Male Pre 3 … 2
1 Male Post 5 … 5
2 Male Pre 3 … 4
2 Male Post 4 … 6

160行=80人×2次;所有题项采用1—7分。

分析单位:人;重复测量主体:ID;结果变量:每组题项的均分。

WorkBuddy、R或Python可直接处理长格式;SPSS GLM Repeated Measures通常需先转宽格式。
06

AI-ASSISTED WORKFLOW

AI可以加速四步,人负责口径与决策

数据审计

检查ID、Pre/Post配对、范围、缺失、重复和异常标签。

模型运行

生成构念均分,运行三个混合ANOVA,报告完整统计量。

结果可视化

输出描述统计与交互图,帮助判断变化方向与人群差异。

反向核验

解释不一致结果,检查平方和、数据结构和过度推断。

人的四项责任:提出可回答的问题;核对变量和模型;区分结果、推断与建议;为传播决策及其边界负责。
课堂要求学生提交代码或完整AI交互记录,使分析过程可复查。
09

ANOVA LOGIC

F值:可解释差异与随机波动的比值

F=系统性变异÷误差变异

F值

活动前后或群体之间的差异,相对于个体波动有多突出。

p值

在零假设下获得当前或更极端结果的概率。

partial η²

.01小、.06中、.14大;帮助判断差异有没有实际意义。

回到案例:显著性帮助判断差异是否可靠,效应量帮助判断差异是否值得管理层行动。
避免把p解释为“结果由随机造成的概率”。
07

THREE EFFECTS

一张表,回答Running Mate的三个问题

Time

不区分Gender,Post是否整体高于Pre?

案例解释:消费者反馈在一个月后是否普遍改善

Gender

跨两个时间点看,Male与Female总体是否不同?

案例解释:哪一组总体评分更高

Time × Gender

两组从Pre到Post的变化幅度是否不同?

案例解释:哪一组与活动后的变化关联更强

Gender主效应显著,不能直接说明活动对该组更有效;判断“谁变化更大”要看交互。
08

READING ORDER

先看交互,再看主效应

确认设计重复与分组
检查交互显著性与效应量
查看图形方向与幅度
阅读主效应整体变化与组差
写出边界样本、因果、替代解释
交互显著时,只说“总体提高”会掩盖人群差异。
09

PUBLISHED EXAMPLE

论文怎样连接设计、表格和结论?

Du与Reynolds比较两种口语互动条件,在Pre/Post测量动机与预期努力,并用two-way mixed-design ANOVA检验三种效应。

值得模仿

问题、分组、时间点、量表、统计表和解释相互对应。

阅读任务

圈出F、p、η²,用一句普通语言说明交互。

打开Du & Reynolds (2025)全文下载论文PDF
Du & Reynolds (2025) · ANOVA表格节选
10

PROJECT LAB · 40 MIN

亲手跑一遍ANOVA,才有能力分析自己的用户反馈

1

数据检查

ID、组别、时间、缺失、范围。

2

构念计算

BA、PI、WOM均分和描述统计。

3

混合ANOVA

检验三个结果的三种效应。

4

决策输出

作图、APA结果、传播行动与边界。

① 下载数据② 打开任务单
建议用时:检查5分钟、描述统计8分钟、ANOVA与作图15分钟、解释与决策12分钟。
11

TASK 1 · DATA AUDIT

先让AI报告它看见了什么

检查点

  • 80个唯一ID
  • Male 39、Female 41
  • 每个ID恰有Pre和Post
  • 160行、14个原始字段
  • 题项均在1—7之间
  • 缺失、重复与异常标签
请读取Excel,先不要运行ANOVA。报告行列数、唯一ID数量、Gender人数、Time水平、每个ID是否同时有Pre与Post、题项是否在1—7之间,并列出缺失值、重复行和异常标签。不要修改数据。
检查结果与任务说明不一致时,停止分析,先定位数据问题。
12

TASK 2 · DESCRIPTIVES

把题项转换成构念,再看均值

BA = mean(BA1…BA4)
PI = mean(PI1…PI4)
WOM = mean(WOM1…WOM3)
变量时间Male M(SD)Female M(SD)
BAPre/Post3.44(.76)/4.12(.76)3.45(.92)/4.52(.78)
PIPre/Post3.08(.69)/4.01(.57)3.78(.88)/5.15(.80)
WOMPre/Post3.77(.78)/4.58(.85)3.67(.74)/5.20(.76)
哪个指标两组变化最接近?哪个指标的两条线最可能不平行?
BA变化较接近;WOM女性提升约1.52、男性约0.81。
13

TASK 3 · RUN THE MODEL

让AI计算,也让它交付可核验过程

这是Running Mate × Rosé为期一个月的教学合成传播案例。请对BA、PI、WOM分别运行2×2混合设计ANOVA:Time为被试内因素,Gender为被试间因素,ID为重复测量主体,采用Type III平方和。报告Time、Gender、Time×Gender的F(1,78)、p和partial η²;输出描述统计表与交互图;把三种效应分别对应到“是否有变化、两组总体是否不同、谁变化更大”。提供可复现代码,并标注没有对照组和意愿不等于行为这两项边界。不要修改或补造数据。

WorkBuddy路径

上传Excel → 粘贴指令 → 查看代码 → 对照检查点 → 追问不一致原因 → 下载图表。

SPSS拓展

先转宽格式;Analyze → General Linear Model → Repeated Measures;定义Time(2),Gender放入Between-Subjects Factor。

IBM官方说明 ↗
只有两个Time水平,球形性自动满足。AI输出若与检查点不同,先核对构念均分、ID结构和平方和口径。
14

CHECKPOINT · RECOMPUTED

三个指标,九个效应

OutcomeTime F / η²Gender F / η²Time×Gender F / p / η²
BA73.31 / .485 显著1.95 / .024 ns3.61 / .061 / .044 ns
PI150.46 / .659 显著44.50 / .363 显著5.56 / .021 / .067
WOM173.59 / .690 显著2.96 / .037 ns16.01 / <.001 / .170
先比较自己的输出。若交互检查点不一致,检查构念均分、ID重复结构和平方和口径。
旧答案的三个Time F略有不同;本页使用原始Excel复算的Type III口径。
15

INTERACTION PLOTS

线条是否平行,帮助看见交互

BA · 交互未达显著
PI · 中等交互
WOM · 大交互
图形支持解释,显著性仍以模型结果为准。用“方向+幅度+人群”描述每张图。
16

FROM RESULTS TO DECISIONS

逐项回答案例开始时的三个问题

是否续投

证据:BA、PI、WOM的Time效应均显著且为大效应。

判断:可以进入下一轮小规模验证,不宜据此直接全面加码。

投向谁

证据:PI与WOM交互显著,Female提升更明显;BA交互未达显著。

判断:女性是优先转化人群,男性需要测试其他价值线索。

传播什么

证据:数据测量了态度、购买与分享,没有直接测量内容机制。

判断:联名故事、UGC或稀缺性都属于下一轮待检验假设。

决策边界:没有未接触活动的对照组,无法把全部变化归因于合作;意愿也不等于实际购买与分享。
要求学生将每句话标注为数据支持、合理推断或待验证建议。
17

DECISION WORKSHOP

100万元传播预算,怎样设计下一轮方案?

投向哪个群体?

重点转化Female,还是增加对Male及其他潜在用户的探索?

需要引用:PI与WOM交互、BA非显著交互及均值变化。

传播什么内容?

可提出联名故事、粉丝参与、产品设定、收藏价值、稀缺性或社群玩法。

注意:这些是待验证方案,需要说明假设和目标指标。

怎样继续验证?

安排对照组或A/B测试,记录点击、购买、分享等行为,并用访谈解释差异。

需要保留:研究与测试预算。

A组 · 人际共创

只与组内同学聊天和头脑风暴,不使用AI。记录分歧、取舍和最终方案。

B组 · AI共创

组员之间不讨论,只能把数据结果和约束告诉AI,通过连续追问形成方案。

方案对决:两组各用8分钟设计方案、2分钟陈述、1分钟接受对方质询。提交内容包括:100万元分配、目标群体、两项传播内容、一个行为指标和一个当前不能下的结论。全班从证据、创意、可执行性三项投票。
比较两组的创意数量、证据对应、可执行性和盲点。活动关注不同共创方式如何影响方案质量,不预设哪一组获胜。
18

UNIT PROJECT · YOUR GAME

把ANOVA流程用于自己的小游戏用户反馈

设计

  • 选择吸引力、理解度、继续使用意愿或目标达成感。
  • 设置Pre/Post,或比较V1/V2前后的同一批用户。
  • 选择有意义的Group,如新手/熟练用户。
  • 小样本定位为课堂pilot,诚实说明不确定性。
交付
问题、变量、设计匹配2
数据检查与构念计算2
ANOVA与交互图3
产品决策2
代码或AI记录1
第五讲从ANOVA发现的差异出发,用访谈追问:为什么两类用户体验不同?
19

WATCH · READ · REPRODUCE

带走一条可复现的决策链

研究问题明确比较
数据结构重复与分组
统计模型三种效应
结果解释方向与边界
传播行动下一轮测试
B站:混合设计ANOVAIBM官方说明
20