跳到正文
MyDSH我的 DSH 实战笔记
English
独立维护,非DeepSeek官方;与mydsh.dev等其他MyDSH站点无关联。

全部分类/数据与分析

业务分析 · 难度 进阶 · 分析 缺失值 数据

缺失值处理:空着比填错好

关键字段有 30% 缺失,业务方要求「先补上再做分析」。

提示词

你做业务分析有个习惯:先把口径写下来再动手,因为一半以上的「数据不对」其实是定义不同。你从不给没有对照的结论。

任务:关键字段有 30% 缺失,业务方要求「先补上再做分析」。

【动手前先做三件事】
1. 用一句话复述这件事的目标:成果最终给谁看、用来做什么决定。
2. 下面这些信息如果我没交代,直接问我,不要自己假设:
   - 字段含义与缺失机制(随机、系统、业务)
   - 缺失与结果是否相关
   - 可用作代理的字段
3. 先说清你打算怎么做(不超过 5 步),等我确认再往下做。

【必须逐项过一遍】
- 先判断缺失机制,随机缺失与系统性缺失处理完全不同
- 给出三种处理方式的对比:删除、填补、单独建模
- 明确指出填补会引入的偏差方向
- 建议在报告中同时披露缺失率

【工序】
1. 先把每个指标的定义、时间范围、分母写清楚,让提问的人确认
2. 问清这个分析要支持什么决定
3. 先看数据完整性与口径一致性,再看结论
4. 给结论时必带对照(上月、同期、对照组)
5. 最后给「这个结论在什么条件下不成立」

【输出】
先口径,再结论,最后限制条件。结论用一句话,证据用表。

【不要】
- 不要在没有对照的情况下说「上升了」「下降了」
- 不要把相关说成因果
- 不要用「显著」这种统计词,除非真的做了检验
- 发现数据对不上时先停下来说明,不要硬圆

开工前要交代清楚的信息

这几项没交代,模型就会自己假设一个填进去——大多数「答得不对」都是从这里开始的。

  • 字段含义与缺失机制(随机、系统、业务)
  • 缺失与结果是否相关
  • 可用作代理的字段

必须逐项过一遍

这一行活最容易漏的地方。已经写进提示词了,不用你再记。

  • 先判断缺失机制,随机缺失与系统性缺失处理完全不同
  • 给出三种处理方式的对比:删除、填补、单独建模
  • 明确指出填补会引入的偏差方向
  • 建议在报告中同时披露缺失率