search

alibaba / DataX

DataX是阿里云DataWorks数据集成的开源版本。
Other
15.86k stars 5.41k forks source link

datax job的进度信息 #1457

Open zyxdSTU opened 2 years ago

zyxdSTU commented 2 years ago

这个问题其实困扰我很久。 dataX能够实时获取数据同步任务的进度吗？ 比如我是一个基于spring boot的前后端应用，集成了datax, 在用户创建、运行了数据导入的datax job时，能实时获取目前job的进度。

leehom commented 2 years ago

datax内置Communication收集和统计job进度，通过日志输出，参考下面连接，输出到Prometheus https://www.toutiao.com/article/7103174310868582945/

zyxdSTU commented 2 years ago

datax内置Communication收集和统计job进度，通过日志输出，参考下面连接，输出到Prometheus https://www.toutiao.com/article/7103174310868582945/ 代码放csdn, 这有点low啊......

leehom commented 2 years ago

datax内置Communication收集和统计job进度，通过日志输出，参考下面连接，输出到Prometheus https://www.toutiao.com/article/7103174310868582945/ 代码放csdn, 这有点low啊......

这只是形式，计较那么多干嘛，钱放在lv上和放在塑料袋还不是一样

xj-black commented 2 years ago

哥们搞定了没，我也想知道怎么弄，获取进度和终止任务。