Crawl4AI

点评

GitHub 上最火的 AI 爬虫，把网页洗成干净 Markdown/JSON 直接喂给大模型，连 JS 渲染的页面都能搞定。要会点 Python，但做资料库、喂知识库的核心引擎就是它。