taosdata / DataX

DataX是阿里云DataWorks数据集成的开源版本。涛思数据基于DataX,开发了TDengine的Writer和Reader插件,为用户提供ETL和数据迁移的工具。
Other
41 stars 9 forks source link

tdengine 3.0 adaption #39

Closed zmlgirl closed 1 year ago

zmlgirl commented 1 year ago

1.适配 tdengine 3.0 的读写 2.tdengine 的 connector 由 2.0.39 升级为 3.0.3,使用该驱动连接 tdengine 2.6 的时候会报连接错误,所以可以认为适配 3.0 之后是不兼容 2.0 的。

zmlgirl commented 1 year ago

关于兼容性的另外一种处理方式就是另外新建两个新的 module,分别是 tdengin30reader 和 tdengine30writer,类似于之前 DataX 对于 Hbase 的处理方式。 image

zmlgirl commented 1 year ago

目前参考 hbase 扩展了 TDengine30Reader 和 TDengine30Writer 用于对 Tdegnine 3.0 及以上版本进行读写操作,之前的 TDengineWriter 和 TdengineReader 修改为了 TDengine20Writer 和 TDengine20Reader,具体修改说明请参考:https://taosdata.feishu.cn/docx/CE8zd4IPZoLC4nxhcEJcFCwsnQe

sangshuduo commented 1 year ago

目前参考 hbase 扩展了 TDengine30Reader 和 TDengine30Writer 用于对 Tdegnine 3.0 及以上版本进行读写操作,之前的 TDengineWriter 和 TdengineReader 修改为了 TDengine20Writer 和 TDengine20Reader,具体修改说明请参考:https://taosdata.feishu.cn/docx/CE8zd4IPZoLC4nxhcEJcFCwsnQe

It's better to host this document on the public repo instead of feishu doc. :)