Lightpanda Browser是一款开源的无头浏览器,专为自动化任务设计,具有超低内存占用和超快执行速度,可助力AI Agent、数据抓取和测试等工作。它的内存占用极低,仅为Chrome的1/9,执行速度超快,比Chrome快11倍,并且兼容Playwright和Puppeteer,能够轻松集成现有的自动化工具。
Crawlee-Python是一个用于Python的网络爬虫与浏览器自动化库,提供全面的网页抓取和数据提取解决方案,支持快速构建可靠的爬虫,具有人类行为模拟能力和现代反爬虫技术规避能力,适合各种数据抓取需求。
Kspider是一个无需代码的爬虫平台,支持多种数据源和插件扩展,适用于高效的数据抓取和处理,用户可以通过友好的界面轻松创建和管理爬虫任务,同时具备实时数据监控功能。
Cerebellum 是一个基于智能体的浏览器自动化工具,通过使用 LLM 构建的智能体,实现自动化操作键盘和鼠标,在网页上完成数据抓取、自动化测试等任务。该工具兼容任何 Selenium 的浏览器,并支持 Cluade 3.5 Sonnet 模型,旨在提高网页操作的效率和准确性。