 maxiaoshan
|
e9ca2605de
xg
|
%!s(int64=3) %!d(string=hai) anos |
 maxiaoshan
|
d91023eb8c
xg
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
4acab29110
历史版本优化
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
352c7e1173
流量统计优化
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
fd41ca5927
上下架修改
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
7cb721d8fa
loadscript方法改动
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
33d8e6143a
调整无限翻页逻辑
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
08250488d7
xg
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
15704f37eb
队列模式初始化爬虫增加channel字段
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
2dce6c4cc2
xg
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
75daaf5d12
'spider_heart、spider_downloadrate增加site和channel'
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
43b306dcf4
新增iscompete是否是新爬虫的判断
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
97aecb108f
调整spider_loadfail入库机制
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
19293db83f
修改加载失败爬虫保存
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
53550b8189
下架不更新心跳del
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
711cde84fe
xg
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
adaa026c9e
修改爬虫下架时心跳控制
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
548bdb8149
新增心跳、修改爬虫补漏逻辑、高性能采三级页重载爬虫
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
c98f8b3cf5
上架日志调整
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
03f0bb434d
爬虫历史转增量日志
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
2643a13a05
xg
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
5f518aa8bc
日志新增
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
18d3bd8924
新增输出日志
|
%!s(int64=3) %!d(string=hai) anos |
|
maxiaoshan
|
2604ae24e0
上架时日志修改
|
%!s(int64=4) %!d(string=hai) anos |
|
maxiaoshan
|
3788f01989
xg
|
%!s(int64=4) %!d(string=hai) anos |
|
maxiaoshan
|
978bea098a
新增配置三级页下载线程数
|
%!s(int64=4) %!d(string=hai) anos |
|
maxiaoshan
|
9753a2ad47
commit
|
%!s(int64=4) %!d(string=hai) anos |
