search

alibaba / DataX

DataX是阿里云DataWorks数据集成的开源版本。
Other
15.77k stars 5.39k forks source link

mysql Reader 中 设置的channel 与task数 到底啥关系？为啥不匹配 #2201

Closed GdHuni closed 1 week ago

GdHuni commented 2 weeks ago

如图，我设置的channel数是2 希望两个通道来抽数，并且能控制hdfs 文件数也是2，但实际上 开了11个task来抽数，hdfs 的文件数也是11了，这样就不知道怎么来控制并发了，以及hdfs的文件数也无法控制 image