数据爬虫概述所谓网页爬虫,就是指把URL地址中指定的网络资源从网络流中读取出来,保存到指定的数据库
爬虫基本原理
爬虫分类批量爬虫增量爬虫
我们的数据爬虫分布式爬虫整体结构
中心服务器
提供为每一台spiser的接口
TASK_
2018-03-27