先诊断数据,再让数据清洗 Agent 生成规则。

数据清洗 Agent 先诊断数据,再按规则执行传统清洗、机器学习清洗或大模型清洗。它会把规则、异常处理和质量检查写清楚,清洗产物默认交付为新文件或新表,不覆盖原始数据。

适用版本:QiyanAgent V3.5。最后更新:2026年9月14日。

数据清洗 Agent 步骤图:保留原始数据,查看清洗能力包和内置 Skills,输入清洗目标与验收标准并发送任务。

本图来自 QiyanAgent V3.5 实际界面,标注对应能力选择、Skills 配置、任务输入与发送步骤。

开始前准备

  • 在项目打开的前提下,把待清洗数据放在项目目录或导入当前 DuckDB。
  • 保留原始数据,不要直接覆盖源文件。
  • 说明关键字段、主键、时间字段、单位、变量口径和不可修改的字段。
  • 如果已有清洗标准,先把规则文档或字段字典放进项目目录。

操作步骤

  1. 在左侧数据清洗工作区查看正则清洗、缺失值处理、重复记录、类型转换、文本标准化、分类映射、变量构造、实体对齐、模糊去重、异常检测、文本分类、模型填补、结构化抽取和隐私脱敏等能力包。
  2. 可以手动激活某个数据清洗能力包执行任务,也可以在任务中描述问题,让 Agent 自行判断需要加载的能力。
  3. 需要查看能力时,打开“设置 → 技能”,切换到数据清洗智能体;内置技能会自动同步,需要补充清洗方法时再使用“导入”。
  4. 在底部输入数据清洗任务提示词,说明数据位置、字段口径、清洗目标、输出格式和质量验收标准。
  5. 点击发送按钮,让数据清洗 Agent 先做诊断,再生成规则并执行清洗。

验收要点

输出应包含清洗前后对比、规则说明、异常处理依据、行数变化、字段变化和质量报告。清洗产物应保存为新文件或新表,不应覆盖原始数据。