项目对比

A

Crawlee——一个用于 Python 的网络抓取和浏览器自动化库，用于构建可靠的爬虫。提取 AI、LLM、RAG 或 GPT 的数据。从网站下载 HTML、PDF、JPG、PNG 和其他文件。适用于 Parsel、BeautifulSoup、Playwright 和原始 HTTP。有头模式和无头模式。通过代理轮换。

H

作者声明：在工具输出、日志、文件和 RAG 文本块交给 LLM 之前进行压缩，提供库、代理与 MCP 服务；作者称可减少 Token 用量，实际效果依场景核实。