skills/smithery.ai/authoritative-data-harvester

authoritative-data-harvester

Installation
SKILL.md

权威数据自动获取(Authoritative Data Harvester)

目标

在数学建模任务中,快速找到“权威、可引用、可复现”的公开数据源,并以尽量不爬网页、优先 API/批量下载的方式获取数据,最终输出:

  • 数据获取脚本/方案(含链接、参数、时间范围、字段解释)
  • 原始数据与清洗后的数据(CSV/Parquet)
  • 数据字典与引用信息(来源、更新时间、许可证/条款、访问日期)

何时调用

  • 需要权威/官方数据源(统计局、国际组织、政府开放数据)
  • 需要可复现的数据抓取流程(接口参数固定、可重复运行)
  • 已有变量清单但缺数据,或需要补充替代指标

总原则(必须遵守)

  1. 优先使用官方 API 或 Bulk Download,最后才做 HTML 解析。
  2. 遵守 robots.txt 与服务条款,尊重速率限制;不得绕过登录/付费/验证码。
  3. 全流程可复现:记录来源 URL、接口参数、访问日期、版本/更新时间、字段含义与单位。
  4. 数据质量优先:对齐口径、单位、频率、地理范围;明确缺失与异常处理策略。
Installs
1
First Seen
Apr 20, 2026
authoritative-data-harvester from smithery.ai