[[0.index|回到目录]] # 实测 15 万星 Firecrawl!解决AI智能体网页反爬读取难题 **内容简介:** 本文介绍了一款能够读取全网99%网页的工具:firecrawl,每月有免费额度,是玩智能体(openclaw,Hermes等)的必装工具之一。 --- 正文 自从开始玩openclaw和Hermes后,有好的文章,就发给它们,给我总结,挺方便的。 在知乎上,看到一篇人生经验类的文章,挺有意思的,这篇文章的观点是: **人这一辈子活得好不好,全看你能不能彻底杀死那个随时随地都在向外求、等反馈、盼着别人给交代的自己。** 于是,就把这篇文章,发给了Hermes 智能体,让它给我总结。 ![](https://yesaiwen.com/_obsidian_proxy/mdnice007.oss-cn-beijing.aliyuncs.com/20260715051947163.png) 但是过了一会儿,Hermes用了各种方法后,告诉我:知乎把所有的渠道都封了。这篇文章读不了。 ![](https://yesaiwen.com/_obsidian_proxy/mdnice007.oss-cn-beijing.aliyuncs.com/20260715052026163.png) 气煞我也!! 整天牛B哄哄的、号称要代替人类的AI智能体,就这样:连篇文章都读不了。 发现互联网有些神奇:**你心里念想着什么的时候,它就能在网上自动出现,算法会推送给你**。 隔了几天,在公众号上,看到了一篇解决这个问题的方案:firecrawl。 这款app是在github上,竟然有15万赞(2026-7-15)。 上周我看的时候,还是14万赞。 ![](https://yesaiwen.com/_obsidian_proxy/mdnice007.oss-cn-beijing.aliyuncs.com/firecrawl.png) 抱着试试看的心态,就去体验一下。 只需简单的3步,就能用它了。 ## 第1步:注册 打开网址,点击右上角的“sign up(注册)” [https://www.firecrawl.dev/](https://www.firecrawl.dev/) ![](https://yesaiwen.com/_obsidian_proxy/mdnice007.oss-cn-beijing.aliyuncs.com/20260715061936893.png) 填写邮箱,设置密码。 或者直接用谷歌账号登录。 我就是用谷歌账号,直接登录。 ![](https://yesaiwen.com/_obsidian_proxy/mdnice007.oss-cn-beijing.aliyuncs.com/20260715062018206.png) ## 第2步:安装 打开概览后,可以看到api秘钥和安装方法。 在客户端,或者智能体里,直接输入这个命令: ``` npx -y firecrawl-cli@latest init --all -k 你的秘钥 例如: npx -y firecrawl-cli@latest init --all -k fc-fc******acce4 ``` ![](https://yesaiwen.com/_obsidian_proxy/mdnice007.oss-cn-beijing.aliyuncs.com/20260715064659362.png) ![](https://yesaiwen.com/_obsidian_proxy/mdnice007.oss-cn-beijing.aliyuncs.com/%E5%AE%89%E8%A3%852.png) ## 第3步:使用 告诉智能体,让它用firecrawl读取总结文章,发给智能体链接。 很快,智能体就把文章总结好了。非常方便。 ![](https://yesaiwen.com/_obsidian_proxy/mdnice007.oss-cn-beijing.aliyuncs.com/20260715065417258.png) ## 小结 测试之后发现,这款网页读取工具——firecrawl,功能真的强大,能配得上github上15万星的赞誉。 个人认为,它是AI智能体(openclaw,Hermes等等)的必装工具之一。 [[0.index|回到目录]] ## AI资讯群 建了一个AI信息的免费微信群。 资讯太多,这个群计划分享精简实用的AI资料。 感兴趣的小伙伴可以免费扫码加入。 ① 扫码关注微信公众号“叶赛文”(最下面的二维码) ② 发一条消息:AI信息群,可以看到我的微信。 ③ 加我微信后,我拉你入群。 ![](https://yesaiwen.com/_obsidian_proxy/mdnice007.oss-cn-beijing.aliyuncs.com/obsidian/202502141423896.png) [[0.index|回到目录]]