什么是 firecrawl?
网页抓取和搜索 CLI 从任何 URL 返回干净的 Markdown(处理 JS 渲染 页面、SPA)。当用户请求时使用:(1)“在网络上搜索 X”,(2)“抓取/获取 URL内容”,(3)“从网站获取内容”,(4)“查找有关X的最新文章”, (5) 需要当前网络数据的研究任务,(6) 从页面中提取结构化数据。 输出LLM友好的Markdown,通过firecrawl登录处理身份验证,支持 用于批量操作的并行刮擦。自动写入 .firecrawl/ 目录。 触发器:网页抓取、搜索网页、获取 URL、提取内容、Firecrawl、抓取 网站,获取页面内容,网络研究,站点地图,抓取站点。 来源:acedergren/agentic-tools。