소스 검색

多线程采集

maxiaoshan 3 년 전
부모
커밋
765a4eb579
1개의 변경된 파일1개의 추가작업 그리고 1개의 파일을 삭제
  1. 1 1
      src/spider/spider.go

+ 1 - 1
src/spider/spider.go

@@ -1035,7 +1035,7 @@ func (s *Spider) DownloadDetail(stype string) {
 					data["spidercode"] = s.Code
 					data["dataging"] = 0
 					data["iscompete"] = s.IsCompete //2021-11-01以后新增的爬虫不在展示原文链接(保存服务判断)
-					//Store(s.StoreMode, s.StoreToMsgEvent, s.Collection, s.CoverAttr, data, true)
+					Store(s.StoreMode, s.StoreToMsgEvent, s.Collection, s.CoverAttr, data, true)
 					set := map[string]interface{}{"$set": map[string]interface{}{"state": 1, "updatetime": time.Now().Unix(), "date": data}} //下载成功state置为1
 					update = append(update, query)
 					update = append(update, set)