浏览代码

增加单页数量大小

dongzhaorui 1 年之前
父节点
当前提交
31d7a72e97
共有 1 个文件被更改,包括 1 次插入1 次删除
  1. 1 1
      ybw/list_spider2.py

+ 1 - 1
ybw/list_spider2.py

@@ -34,7 +34,7 @@ def spider(collection, dedup, page, task):
     @param task: 任务
     @param task: 任务
 
 
     """
     """
-    page_size = 1000  # 单页大小
+    page_size = 4000  # 单页大小
     date = datetime.datetime.now().strftime('%Y-%m-%d')
     date = datetime.datetime.now().strftime('%Y-%m-%d')
     params = {
     params = {
         'device': 'es',
         'device': 'es',