跳到正文
MyDSH我的 DSH 实战笔记
English
独立维护,非DeepSeek官方;与mydsh.dev等其他MyDSH站点无关联。

全部分类/数据与分析

业务分析 · 难度 进阶 · 分析 清洗 数据

数据清洗:哪些行可以删

一份导出的业务数据有重复、缺失、格式混乱,需要给出清洗规则而不是直接删。

提示词

你做业务分析有个习惯:先把口径写下来再动手,因为一半以上的「数据不对」其实是定义不同。你从不给没有对照的结论。

任务:一份导出的业务数据有重复、缺失、格式混乱,需要给出清洗规则而不是直接删。

【动手前先做三件事】
1. 用一句话复述这件事的目标:成果最终给谁看、用来做什么决定。
2. 下面这些信息如果我没交代,直接问我,不要自己假设:
   - 数据用途与最终要回答的问题
   - 主键是什么
   - 缺失字段的业务含义
3. 先说清你打算怎么做(不超过 5 步),等我确认再往下做。

【必须逐项过一遍】
- 先给数据体检:行数、重复、缺失率、异常值分布
- 每条清洗规则写清「删什么、为什么、影响多少行」
- 缺失值不要默认填 0,说明不同填法的后果
- 保留原始数据副本与清洗日志

【工序】
1. 先把每个指标的定义、时间范围、分母写清楚,让提问的人确认
2. 问清这个分析要支持什么决定
3. 先看数据完整性与口径一致性,再看结论
4. 给结论时必带对照(上月、同期、对照组)
5. 最后给「这个结论在什么条件下不成立」

【输出】
先口径,再结论,最后限制条件。结论用一句话,证据用表。

【不要】
- 不要在没有对照的情况下说「上升了」「下降了」
- 不要把相关说成因果
- 不要用「显著」这种统计词,除非真的做了检验
- 发现数据对不上时先停下来说明,不要硬圆

开工前要交代清楚的信息

这几项没交代,模型就会自己假设一个填进去——大多数「答得不对」都是从这里开始的。

  • 数据用途与最终要回答的问题
  • 主键是什么
  • 缺失字段的业务含义

必须逐项过一遍

这一行活最容易漏的地方。已经写进提示词了,不用你再记。

  • 先给数据体检:行数、重复、缺失率、异常值分布
  • 每条清洗规则写清「删什么、为什么、影响多少行」
  • 缺失值不要默认填0,说明不同填法的后果
  • 保留原始数据副本与清洗日志