AI能干爬虫干的事吗?也就是搜集数据?

2025-06-27 21:50:11

刚安装好 Gemini CLI,测试用 AI Agent 来写个爬虫试试。

我本来想写复杂一点,比如告诉 AI 列表页的 URL 构造,告诉 AI HTML 页面里的 DOM 构造,告诉 AI 我都需要哪些数据等等。

后来想,既然都智能体了,干脆让 AI 自主到底,所以用了最简单的 Prompt: 爬取完整的知识库 [链接],将结果保存在一个 txt 文档里。

AI 的第一步:访问链接,获取 HTML(由于不那么信任 AI,所以我选的单次同意执行): 第二步:安装需要的库(其实…。

AI能干爬虫干的事吗?也就是搜集数据?
广告位810*200
相关阅读
如何评价书籍《国家意志》?

如何评价书籍《国家意志》?

国家意志里我最喜欢的片段是:林淮生未能按***与空降兵会合,...

2025-06-22
编译器和解释器的分界线在哪,字节码效率能否无限接近机器码?

编译器和解释器的分界线在哪,字节码效率能否无限接近机器码?

没有分界线,编译器和解释器被统一在了被称为 扶她映射(Fut...

2025-06-22
为什么很多公司都不招大龄码农?

为什么很多公司都不招大龄码农?

我老婆去面试一家公司,对面的CTO很年轻,就问经典问题,就是...

2025-06-22
学生校服如何隐藏内衣痕迹?

学生校服如何隐藏内衣痕迹?

不应该在乎这些东西,因为你怎么样都有别人攻击你的点,露出内衣...

2025-06-22
电脑有64G的物理内存(DDR5 5200),完全够用了,可以关闭系统的虚拟内存吗?

电脑有64G的物理内存(DDR5 5200),完全够用了,可以关闭系统的虚拟内存吗?

现身说法。 自从我电脑上有16G内存之后,每次重装完Wind...

2025-06-22