Create your Gitee Account
Explore and code with more than 6 million developers,Free private repositories !:)
Sign up
This repository doesn't specify license. Without author's permission, this code is only for learning and cannot be used for other purposes.
Clone or download
README.md 1.14 KB
Copy Edit Web IDE Raw Blame History
virjar authored 2017-02-11 01:17 . 发布后更新文档

client其实是一个独立的项目,他专注于本地代理IP池的管理。他有一些默认策略,其中默认IP数据来源策略和我们的server适配。他是一个精简API,尽量不依赖与其他框架,使得它可以在跟多的环境下使用。

集成client到你的工程

调用IP池对象 (可选)

集成IP池到httpclient (可选)

异步HttpClient支持(可选)

使用已经集成好代理池的httpclient(CrawlerHttpClient)(可选)

使用webMagic(适合WebMagic爬虫用户)

使用webCollector(适合webCollector爬虫用户)

定制差异化的策略(高级用户)

构建客户端代码(可选)

预热IP资源 如果你的IP是私有高质量IP,可以考虑不进行此步骤(可选)

使用统一代理服务(云代理)

配置扩展点

监控代理池IP状态(在web环境下)

faq 常见问题

快速入门演示视频

Comment ( 0 )

Sign in for post a comment