网站爬取与 API 自动化

功能说明

此技能专门用于自动化网站数据爬取和 API 接口调用，包括：

• 分析和爬取网站结构
• 调用和测试 REST/GraphQL API
• 创建自动化爬虫脚本
• 数据解析和清洗
• 处理反爬虫机制
• 定时任务和数据存储

使用场景

• "爬取这个网站的产品信息"
• "帮我调用这个 API 并解析返回数据"
• "创建一个脚本定时抓取新闻"
• "分析这个网站的 API 接口文档"
• "绕过这个网站的反爬虫限制"

技术栈