zhiyu_content_spider

采集脚本

cd /home/www/wangdu_spider

7lou采集

• 全部采集,有去重 scrapy crawl 7lou
• 部分采集,不去重 scrapy crawl zbone -a bid=xx,xx,xxx

趣阅采集

• 全部采集,有去重 scrapy crawl shuangduxs
• 部分采集,不去重 scrapy crawl sdone -a bid=xxx,xxx,xxx