//iplc.best 搬运分享
22:25 · 2024年12月2日 · 周一
#开源 #爬虫 #工具
🕷
Crawl4AI - 一款开源的 Web 爬虫工具
使用文档
Crawl4AI 旨在简化网页数据的爬取与提取过程,专为 LLM 和 AI 应用打造
使用门槛非常低,一行命令就可以开始,爬取新闻类网站比较简单,速度是真的快(如图爬的是NBC的新闻,输出md格式)
📮
投稿
📢
频道
💬
群聊
🔎
索引
GitHub
GitHub - unclecode/crawl4ai: Open-source web crawler and scraper for LLMs and AI agents: any website into clean, LLM-ready Markdown.…
Open-source web crawler and scraper for LLMs and AI agents: any website into clean, LLM-ready Markdown. Run it yourself, or use Crawl4AI Cloud with one key. - unclecode/crawl4ai