产品简介
BrowserCluster Cluster 是一个高性能分布式浏览器自动化系统,基于Playwright和DrissionPage双引擎构建。它支持大规模并发网页抓取、截图和自动化操作,内置智能代理池和Cookie管理,针对Cloudflare等反爬网站优化,提供任务调度和节点监控,适合数据采集和自动化运维团队。
核心功能
- 双浏览器引擎支持
- 分布式集群架构
- 智能代理池管理
- 智能Cookie池管理
- 多模式数据解析
快速开始
- 克隆项目仓库并进入目录
- 配置环境变量和数据库连接
- 运行初始化脚本设置系统
- 启动后端API和Worker服务
- 访问管理界面http://localhost:8000
界面预览
与其他方案对比
| 对比项 | BrowserCluster | 同类方案 |
|---|---|---|
| 并发处理能力 | 支持分布式集群,可水平扩展处理大规模并发 | 多数工具为单机版,受限于单机性能 |
| 反爬优化 | 内置智能代理池和Cookie管理,针对Cloudflare深度优化 | 需要用户自行配置代理和Cookie,易被封禁 |
| 扩展性 | 多Worker节点自动负载均衡,高可用 | 固定架构,扩展性差 |
适合谁用
- 需要批量抓取网站数据的开发者和数据团队
- 应对反爬机制的企业级数据采集人员
- 自动化网页操作和测试的运维工程师
下载与版本
当前最新版本为 v1.2.0,发布于 2026-02-25。支持 多平台。点击页面「下载软件」按钮即可下载打包好的版本,根据你的电脑/手机系统来选择对应的软件。
注意事项
- 本工具仅供学习和研究使用,请遵守相关法律法规。
- 请尊重内容创作者版权,勿将下载内容用于商业或非法传播。
- 项目源码地址:https://github.com/934050259/BrowserCluster