2024年10月11日
摘要: Crawl4AI是一款专为大型语言模型(LLMs)和AI应用设计的开源网页爬虫和数据提取工具。最近挺火的开源AI网络爬虫工具:Crawl4AI 可以直接用于大语言模型和AI应用。性能超快,还能输出适合大语言模型的格式,比如JSON、清理过的HTML和markdown。它还支持同时爬取多个网址,能提取 阅读全文
posted @ 2024-10-11 11:46 PetterLiu 阅读(958) 评论(0) 推荐(0) 编辑