什麼是 firecrawl?
網頁抓取和搜尋 CLI 從任何 URL 返回乾淨的 Markdown(處理 JS 渲染 頁、SPA)。當使用者要求時使用:(1)“在網路上搜尋 X”,(2)“抓取/取得 URL內容”,(3)“從網站獲取內容”,(4)“查找有關X的最新文章”, (5) 需要目前網路資料的研究任務,(6) 從頁面中擷取結構化資料。 輸出LLM友善的Markdown,透過firecrawl登入處理身份驗證,支持 用於批量操作的並行刮擦。自動寫入 .firecrawl/ 目錄。 觸發器:網頁抓取、搜尋網頁、取得 URL、擷取內容、Firecrawl、抓取 網站,取得頁面內容,網路研究,網站地圖,抓取網站。 來源:acedergren/agentic-tools。