This website works better with JavaScript
首頁
探索
說明
登入
data_processing
/
timed_tasks
關註
2
讚好
0
複刻
0
Files
問題管理
0
合併請求
0
Wiki
目錄樹:
c0ebbd77cc
分支列表
標籤列表
master
timed_tasks
/
pre_extract
wcc
c0ebbd77cc
不同集群,支持不同分片
1 年之前
..
config.go
c0ebbd77cc
不同集群,支持不同分片
1 年之前
config.toml
c0ebbd77cc
不同集群,支持不同分片
1 年之前
es.go
c0ebbd77cc
不同集群,支持不同分片
1 年之前
go.mod
0552d7de2a
更新 预处理,定时提前创建好索引
1 年之前
go.sum
0552d7de2a
更新 预处理,定时提前创建好索引
1 年之前
init.go
8f7e9d181b
日报统计,去除分发布时间是凌晨整点数据
1 年之前
main.go
8ea4d858c7
更新 预处理索引程序,完善 支持多个别名以及多个集群
1 年之前
pre_test.go
c0ebbd77cc
不同集群,支持不同分片
1 年之前
readme.txt
0552d7de2a
更新 预处理,定时提前创建好索引
1 年之前
readme.txt
功能:
1. 读取 bidding_file bidding_nomal 数据表,然后拿到 分类好的数据段,传递抽取程序去处理。
2. 定时 创建索引结构;可以每天创建一个或者每月创建一个
目的:
数据处理流程添加了一个预处理阶段,需要把附件识别、标的物识别 过程先放弃,先生索引到一个临时索引,
为了 提高数据时效性。本程序主要实现上面二个功能,具体 `预处理数据生索引`,以及 `删除预处理数据`,
需要在索引程序 中 完成。