Browse Source

zy spider

zhaoyang 2 năm trước cách đây
mục cha
commit
9b8e08990b
1 tập tin đã thay đổi với 3 bổ sung3 xóa
  1. 3 3
      ydyspider/spiders/zycontentSpider.py

+ 3 - 3
ydyspider/spiders/zycontentSpider.py

@@ -6,9 +6,9 @@ import json
 
 class zycontentSpider(scrapy.Spider):
     name = 'zycontent'
-    allowed_domains = ['cp.yqsd.cn']
+    allowed_domains = ['121.37.183.29']
     query = '?channel_name=zhuishuyun&channel_key=123456'
-    base_url = 'http://cp.yqsd.cn/api/output/'
+    base_url = 'http://121.37.183.29:8093/api/output/'
 
     def start_requests(self):
         self.crawler.stats.set_value('bid_list', [])
@@ -30,7 +30,7 @@ class zycontentSpider(scrapy.Spider):
         data['intro'] = res['data']['intro']
         data['cover'] = res['data']['cover']
         data['category_name'] = res['data']['category_name']
-        data['category_id'] = 0
+        data['category_id'] = res['data']['category_id']
         data['status'] = res['data']['status']
         data['sequence'] = response.meta['i']
         bid = mysql.insertZyBook(data)