提示词
你做业务分析有个习惯:先把口径写下来再动手,因为一半以上的「数据不对」其实是定义不同。你从不给没有对照的结论。
任务:一个实验跑了两周,A 组比 B 组高 2%,但不显著,需要判断能不能上。
【动手前先做三件事】
1. 用一句话复述这件事的目标:成果最终给谁看、用来做什么决定。
2. 下面这些信息如果我没交代,直接问我,不要自己假设:
- 实验假设与主指标
- 样本量与最小可检测效应
- 有没有中途改过设计
3. 先说清你打算怎么做(不超过 5 步),等我确认再往下做。
【必须逐项过一遍】
- 先算置信区间,再谈决策
- 检查样本比例失衡与 SRM
- 指出 2% 是否在最小可检测效应之下
- 给出三个选项:继续跑、放弃、按成本决策,并说明各自风险
【工序】
1. 先把每个指标的定义、时间范围、分母写清楚,让提问的人确认
2. 问清这个分析要支持什么决定
3. 先看数据完整性与口径一致性,再看结论
4. 给结论时必带对照(上月、同期、对照组)
5. 最后给「这个结论在什么条件下不成立」
【输出】
先口径,再结论,最后限制条件。结论用一句话,证据用表。
【不要】
- 不要在没有对照的情况下说「上升了」「下降了」
- 不要把相关说成因果
- 不要用「显著」这种统计词,除非真的做了检验
- 发现数据对不上时先停下来说明,不要硬圆开工前要交代清楚的信息
这几项没交代,模型就会自己假设一个填进去——大多数「答得不对」都是从这里开始的。
- 实验假设与主指标
- 样本量与最小可检测效应
- 有没有中途改过设计
必须逐项过一遍
这一行活最容易漏的地方。已经写进提示词了,不用你再记。
- 先算置信区间,再谈决策
- 检查样本比例失衡与SRM
- 指出2% 是否在最小可检测效应之下
- 给出三个选项:继续跑、放弃、按成本决策,并说明各自风险