浏览代码

翻页记录逻辑调整

maxiaoshan 2 年之前
父节点
当前提交
6837fb9f58
共有 1 个文件被更改,包括 2 次插入0 次删除
  1. 2 0
      src/spider/spider.go

+ 2 - 0
src/spider/spider.go

@@ -444,6 +444,8 @@ func (s *Spider) DownListPageItem() (errs interface{}) {
 			} else {
 			} else {
 				inc["page_fail"] = 1
 				inc["page_fail"] = 1
 			}
 			}
+		} else if s.PageTwoTextHash != "" {
+			inc["page_onefail"] = 1
 		}
 		}
 		if downloadAllNum > 0 {
 		if downloadAllNum > 0 {
 			rate := float64(downloadAllNum-repeatAllNum) / float64(downloadAllNum)
 			rate := float64(downloadAllNum-repeatAllNum) / float64(downloadAllNum)