AI能干爬虫干的事吗?也就是搜集数据?
来源:
编辑:
时间:2025-06-28 02:40:10

刚安装好 Gemini CLI,测试用 AI Agent 来写个爬虫试试。
我本来想写复杂一点,比如告诉 AI 列表页的 URL 构造,告诉 AI HTML 页面里的 DOM 构造,告诉 AI 我都需要哪些数据等等。
后来想,既然都智能体了,干脆让 AI 自主到底,所以用了最简单的 Prompt: 爬取完整的知识库 [链接],将结果保存在一个 txt 文档里。
AI 的第一步:访问链接,获取 HTML(由于不那么信任 AI,所以我选的单次同意执行): 第二步:安装需要的库(其实…。
-
{dede:pagebreak/}


网友评论:
{dede:include file='ajaxfeedback.htm' /}
栏目分类

最新文章

热门文章
- arm在低功耗下的效率是x86的两倍以上,为何掌机还不使用arm芯片?
- 2025年,Gitea 和 GitLab 应当如何选择?
- 我爸被车撞做了开颅手术,进了ICU,现在肇事司机说责任不在他,不肯赔钱,怎么办?
- 怎么评价国内AI企业人肉背15块80TB硬盘,飞去马来西亚用英伟达训练数据,以规避美国禁令?
- 面试中被嘲笑Token放在redis里,该如何应对这种情况呢?
- obsidian用一两年后会有多大?全文搜索还快吗?
- 语雀后端从Node迁移到J***a说明了什么?
- 走了中国这么多地方为什么川渝地区的人让人感觉最舒服?
- 剪映网页版要下线了,有没有字节的同学来说下是为啥啊?
- 今年九月将在天安门广场举行盛大阅兵式,你们说意义有多重大!?


