基于nats发布订阅消息框架,开发剑鱼数据流式处理流程

mxs 6dec57fe25 流式-数据保存 1 year ago
historyRepeat ff2417d4a3 初始化 1 year ago
reFile ff2417d4a3 初始化 1 year ago
savebidding 6dec57fe25 流式-数据保存 1 year ago
util 83b576d325 流式-数据保存 1 year ago
README.md 382175d071 更新 'README.md' 1 year ago
conf.yaml ff2417d4a3 初始化 1 year ago
dataflow ff2417d4a3 初始化 1 year ago
go.mod 83b576d325 流式-数据保存 1 year ago
go.sum 83b576d325 流式-数据保存 1 year ago
main.go ff2417d4a3 初始化 1 year ago

README.md

dataflow

基于nats发布订阅消息框架,开发剑鱼数据流式处理流程;客户端通过配置文件编排数据处理流程,编排样例: process:

name: 招标数据流处理
subject: dataprocess
steps: [topclass, extract, save]
remark: 生产环境:招标分类class--》结构化抽取extract--》数据保持save