SmartCrawler
SmartCrawler 是个聪明的小爬虫，它能像人一样浏览网页，自动识别重复内容和可变模式。无论是批量采集数据还是分析网站结构，它都能帮你省去手动筛选的麻烦。
- 分类
- 数据分析
- 来源仓库
- https://github.com/pixlie/SmartCrawler
功能简介
SmartCrawler 是个聪明的小爬虫，它能像人一样浏览网页，自动识别重复内容和可变模式。无论是批量采集数据还是分析网站结构，它都能帮你省去手动筛选的麻烦。
适用能力
[{"title":"让爬虫工作变得更聪明","desc":"智能重复检测和模板识别功能，让数据采集效率翻倍"},{"title":"复用项目上下文","desc":"结合已有文件、规则和输入材料，减少每次重新说明背景的成本。"},{"title":"输出可交付结果","desc":"适合生成分析结果、执行步骤、代码修改建议或可复制的内容草稿。"}]
输入说明
需求描述、项目文件、参考资料、截图或用户指定的执行规则。
输出说明
分析结果、执行步骤、生成内容、代码修改或可复制的交付文档。
示例提示词
["使用 SmartCrawler 帮我处理这个任务","调用 SmartCrawler，按当前项目规则给出执行方案","用 SmartCrawler 生成一版可以直接交付的结果"]
安装命令
codex skill add pixlie/SmartCrawler