datavane / tis

Support agile DataOps Based on Flink, DataX and Flink-CDC, Chunjun with Web-UI
https://tis.pub
Apache License 2.0
1.04k stars 221 forks source link

实时同步中的设置中,批量设置不生效,需要一个表一个表的设置状态,比较麻烦,如果表比较多的话,需要多次点击 #355

Open junlintianxiazhifulinzhongguo opened 2 months ago

junlintianxiazhifulinzhongguo commented 2 months ago

数据管道添加部分的批量设置可以直接使用,非常方便 image 实时同步中的设置中,批量设置不生效,需要一个表一个表的设置状态,比较麻烦,如果表比较多的话,需要多次点击 image 通过首页编辑实例配置文件比较麻烦,需要跳转多次 image

而且我发现通过 docker-compose 部署的方式,批量构建支持的数据库最多 40 张表,这个需要在创建实例的地方,给一个比较醒目的提示

baisui1981 commented 2 months ago

谢谢您的反馈,在本issue中您提到了三点:

实时同步中的设置中,批量设置不生效,需要一个表一个表的设置状态,比较麻烦,如果表比较多的话,需要多次点击

确实,前期只开放了批量同步的自动批量设置。后续版本会将增量同步的自动批量设置也补上

通过首页编辑实例配置文件比较麻烦,需要跳转多次

我猜测是想直接跳转到批量管理的编辑页面?如路径:/x/mysql/update?execId=2ed766a2-ed29-0765-9d5c-5b72a04fc816#reader

而且我发现通过 docker-compose 部署的方式,批量构建支持的数据库最多 40 张表,这个需要在创建实例的地方,给一个比较醒目的提示

嗯,这个在后续版本中会做到在触发批量同步执行之前便告知上限是40张表。另外,在即将发布的4.0.1 版本中,可以将TIS中定义的批量同步任务的配置同步到Apache DolphinScheduler调度框架中来接受调度执行,这样可以不受40张表的上限限制.