 dongzhaorui
|
3d1b24269b
取消更新混采任务采集成功状态
|
1 年之前 |
 dongzhaorui
|
0750d4f6e6
优化任务生产与消费策略
|
1 年之前 |
|
dongzhaorui
|
35d0be59b0
任务采集失败时新增字段 "failed_times"
|
1 年之前 |
|
dongzhaorui
|
cee8e108fb
爬虫模块优化:1、去重领取任务；2、新增应用程序关联标识符，可指定数据的消费对象
|
1 年之前 |
|
dongzhaorui
|
61f5a327da
删除 SPIDER_FAILED_TASK_MAX_RETRY_TIMES 配置属性
|
1 年之前 |
|
dongzhaorui
|
381fd95779
删除对外暴露的export_to_db方法
|
1 年之前 |
|
dongzhaorui
|
2b54675a3e
修正 异常数据采集成功时无法更新采集状态的错误异常
|
1 年之前 |
|
dongzhaorui
|
6a353b3f04
删除直接添加列表采集任务推送rabbitmq；添加延时采集任务状态
|
1 年之前 |
|
dongzhaorui
|
20ea787b1e
添加item状态更新维护
|
1 年之前 |
|
dongzhaorui
|
22f4f53048
新增失败标识
|
1 年之前 |
|
dongzhaorui
|
5fab64945d
优化item入库检查逻辑
|
1 年之前 |
|
dongzhaorui
|
01e422ab41
更正实例属性名称
|
1 年之前 |
|
dongzhaorui
|
849282ef2c
删除无效注释
|
1 年之前 |
|
dongzhaorui
|
6f5aa86fad
删除rabbitmq关闭方法代码
|
1 年之前 |
|
dongzhaorui
|
a647a6e9bb
修正rabbitmq不合理的关闭导致队列数据消失问题
|
1 年之前 |
|
dongzhaorui
|
164fa8aa82
添加rabbitmq关闭方法
|
1 年之前 |
|
dongzhaorui
|
b18c426b43
将redis修改成rabbitmq消息队列
|
1 年之前 |
 dongzhaorui
|
73209a47a7
update:优化若干内容与方法
|
2 年之前 |
 maguopeng
|
c0b848b691
update
|
2 年之前 |
|
maguopeng
|
8ba6e05988
upload
|
3 年之前 |
