Sidney 的公開筆記Crawl4AI 免費開源爬蟲適合 LLM 資料清理
基本自架流程可作低成本試驗，但網站存取、運算與外部服務費用需分開評估。
來源重點
貼文介紹 Crawl4AI 自架擷取用途。官方文件支持基本爬取不需外部模型 API key；可選 LLM、託管及登入網站的條件另計，不能將免金鑰推及全部功能。
整理判斷
基本自架流程可作低成本試驗，但網站存取、運算與外部服務費用需分開評估。
適合怎麼用
先拿幾種代表性網站測試輸出品質，再決定是否接進大量收錄或 RAG 流程。
限制與採用條件
登入頁、社群內容、動態渲染與反爬機制仍需要另外測試，不能只看一般網頁的示範。
原始來源Threads / @kikitataysi
前往原始內容來源與閱讀紀錄 · 2026.09.09
已讀 Threads 主文與可見留言，核對官方 README 基礎爬取與可選 LLM 段。本次只核對可取得的文字及所述畫面，未取得全部留言、未完整觀看影片或實際操作工具。補充來源的查閱日期與範圍另列，舊日期不代表本次重讀。
Crawl4AI README · 2026.09.09
已讀基本自架擷取及可選 LLM 說明；免外部模型金鑰不涵蓋可選服務，未實測。
後續更新
移除本站存放的品牌圖片，保留官方連結；社群分享改用本站文字卡。
重讀來源後修訂摘要與發布文案，區分來源主張、本站判斷及未核實範圍。