PythonCLIAPI
OmniCrawl
万能爬虫框架
基于 Scrapling + curl_cffi + Playwright 的全能爬虫框架,支持反反爬、浏览器指纹模拟、智能重试,让数据采集变得简单高效。

Quick start
30 秒跑起来
meteor@store:~$
$ pip install omnicrawl国内可用清华镜像:pip install omnicrawl -i https://pypi.tuna.tsinghua.edu.cn/simple
Download
获取 OmniCrawl
国内用户推荐使用 Gitee 镜像或包管理器安装,速度更快更稳定。
Preview
产品实景
点击图片可放大查看
DEMO


Highlights
功能特点
01
多引擎支持:Scrapling、curl_cffi、Playwright 无缝切换
02
反反爬机制:自动绕过 Cloudflare、Akamai 等 WAF
03
浏览器指纹模拟:真实浏览器行为,降低封禁风险
04
智能重试与代理轮换
05
异步并发采集
06
详细的日志与监控
Get started
准备好了吗?
OmniCrawl 已就绪。选择适合你的方案,立即开始使用——或者先联系我聊聊。