修改Scrapy模板加速项目进度

Oct 4, 2016 · 1 min read  ·
Share on:

方法如下：

1.拷贝/usr/lib64/python2.7/site-packages/scrapy/templates 目录到你的个人目录，比如~/template

2.修改~/templates/project目录模板文件，注意，Spider不能修改，只能通过scrapy genspider生成

3.修改~/templates/spiders 爬虫模板文件

  1. 使用如下命令生成项目以及初始爬虫 scrapy startproject projectname -s TEMPLATES_DIR=~/templates

scrapy genspider crawlername initdomain -s TEMPLATES_DIR=~/templates -t spider_temp_name