使用说明

• 1. 命令行工具
  • 1.查看支持的命令行
  • 2. spider create
  • 3. spider shell
• 2. 单机爬虫-SingleSpider
  • 1. 创建爬虫
  • 2. 代码讲解
  • 3. 使用进阶
• 3. 分布式爬虫-Spider
  • 1. 创建项目
  • 2. 快速生成分布式爬虫
  • 3. 数据入库
  • 4.Spider类参数详解
• 4. 批次爬虫-BatchSpider
  • 准备条件
  • 1. 创建项目
  • 2. 快速生成批次爬虫
  • 3. 数据入库
  • 4. 示例代码：
• 5. 配置文件
  • 全局配置
  • 自定义配置