client其实是一个独立的项目,他专注于本地代理IP池的管理。他有一些默认策略,其中默认IP数据来源策略和我们的server适配。他是一个精简API,尽量不依赖与其他框架,使得它可以在跟多的环境下使用。

集成client到你的工程

调用IP池对象 (可选)

集成IP池到httpclient (可选)

异步HttpClient支持(可选)

使用已经集成好代理池的httpclient(CrawlerHttpClient)(可选)

使用webMagic(适合WebMagic爬虫用户)

使用webCollector(适合webCollector爬虫用户)

定制差异化的策略(高级用户)

构建客户端代码(可选)

预热IP资源 如果你的IP是私有高质量IP,可以考虑不进行此步骤(可选)

使用统一代理服务(云代理)

配置扩展点

监控代理池IP状态(在web环境下)

faq 常见问题

快速入门演示视频