This repository doesn't specify license. Without author's permission, this code is only for learning and cannot be used for other purposes.
README.md
node_crawler
公司大数据项目需要用到惠州商事主体信息,特定写了这个去爬取商事信息
- 配置config
- 读取列表保存
- 读取内容根据配置抽取数据保存本地or数据库
注意:
请使用Node7.6以上版本,部署用pm2,proxyFinder为抓取可用代理ip
您的鼓励是我持续开源的动力:)

Comments ( 0 )