This website works better with JavaScript
Sākums
Izpētīt
Palīdzība
Reģistrēties
Pierakstīties
zhiyu
/
zhiyu_content_spider
Vērot
6
Pievienot zvaigznīti
0
Atdalīts
0
Faili
Problēmas
0
Izmaiņu pieprasījumi
0
Vikivietne
内容采集,从各个cp方采集书籍到植宇内容中台
16
Revīzijas
1
Atzari
0
Laidieni
Koks:
daab044c13
Atzari
Tagi
master
zhiyu_conten...
HTTP
SSH
ZIP
TAR.GZ
zhaoyang
daab044c13
mysql host
2 gadi atpakaļ
content_spider
daab044c13
mysql host
2 gadi atpakaļ
.gitignore
ab0342a55b
spider init
2 gadi atpakaļ
README.md
ab0342a55b
spider init
2 gadi atpakaļ
scrapy.cfg
ab0342a55b
spider init
2 gadi atpakaļ
README.md
采集脚本
cd /home/www/wangdu_spider
7lou采集
全部采集,有去重 scrapy crawl 7lou
部分采集,不去重 scrapy crawl zbone -a bid=xx,xx,xxx
趣阅采集
全部采集,有去重 scrapy crawl shuangduxs
部分采集,不去重 scrapy crawl sdone -a bid=xxx,xxx,xxx