先打开项目,再让数据采集 Agent 处理来源。

数据采集 Agent 负责梳理来源、调用公开 API、保存原始文件、抽样检查并把稳定结果交给清洗或入库。优先使用公开或用户有权访问的接口,不绕过 robots、登录、访问控制或站点限制。

适用版本:QiyanAgent V3.5。最后更新:2026年9月14日。

数据采集 Agent 步骤图:确认项目已打开,选择采集能力包,查看内置 Skills,输入数据采集任务提示词并发送任务。

本图来自 QiyanAgent V3.5 实际界面,标注对应能力选择、Skills 配置、任务输入与发送步骤。

适用场景

  • 梳理来源清单、公开数据、网页 API、批量下载任务和原始文件归档。
  • 需要把采集结果转换为 CSV、XLSX、JSON 或 Parquet 等结构化文件。
  • 需要抽样检查字段、编码、缺失情况,并把可用结果交给 DuckDB 入库。

操作步骤

  1. 在项目打开的前提下,确认采集产物要保存到当前项目目录。
  2. 在左侧数据采集工作区查看来源清单、复现材料、问卷设计、公开数据、原始文件、AKShare、接口采集、站点抓取、批量下载、格式转换、样本检查和落库验证等能力包。
  3. 可以手动激活某个数据采集能力包执行任务,也可以在任务中描述目标,让 Agent 自行判断需要加载的能力。
  4. 需要查看能力时,打开“设置 → 技能”,切换到数据采集智能体;内置技能会自动同步,需要补充采集方法时再使用“导入”。
  5. 在底部输入数据采集任务提示词,说明来源地址、目标字段、时间范围、输出格式和验收口径。
  6. 点击发送按钮,让数据采集 Agent 开始梳理来源、抓取数据、保存原始文件并输出采集说明。

验收要点

输出应包含来源清单、原始文件位置、结构化结果文件、字段说明、抽样检查结果和后续清洗或入库建议。需要入库时,应说明目标 DuckDB 表名和字段边界。