AI能干爬虫干的事吗?也就是搜集数据?_内蒙古自治区赤峰市宁城县讯泛传真机合伙企业

  • 为什么有的人喜欢带着 MacBook 去咖啡店或者书店上网,而不是 ThinkPad 之类的?
  • 程序员都在用什么显示器写代码?
  • AI能干爬虫干的事吗?也就是搜集数据?_内蒙古自治区赤峰市宁城县讯泛传真机合伙企业

    诚信为本,市场在变,诚信永远不变...
    热门分类: 第一系列 | 第二系列 | ......>>更多
    公司动态 当前位置: 首页 > 新闻动态 > 公司动态

    AI能干爬虫干的事吗?也就是搜集数据?

    添加时间:2025-06-27 07:10:11

    刚安装好 Gemini CLI,测试用 AI Agent 来写个爬虫试试。

    我本来想写复杂一点,比如告诉 AI 列表页的 URL 构造,告诉 AI HTML 页面里的 DOM 构造,告诉 AI 我都需要哪些数据等等。

    后来想,既然都智能体了,干脆让 AI 自主到底,所以用了最简单的 Prompt: 爬取完整的知识库 [链接],将结果保存在一个 txt 文档里。

    AI 的第一步:访问链接,获取 HTML(由于不那么信任 AI,所以我选的单次同意执行): 第二步:安装需要的库(其实…。

    AI能干爬虫干的事吗?也就是搜集数据?