WeiYe-Jing / datax-web

DataX集成可视化页面,选择数据源即可一键生成数据同步任务,支持RDBMS、Hive、HBase、ClickHouse、MongoDB等数据源,批量创建RDBMS数据同步任务,集成开源调度系统,支持分布式、增量同步数据、实时查看运行日志、监控执行器资源、KILL运行进程、数据源信息加密等。
https://segmentfault.com/u/weiye_jing/articles
MIT License
5.61k stars 2.16k forks source link

《阿里巴巴 DataX 源码解读专栏》系类文章 #425

Open waterWang opened 3 years ago

waterWang commented 3 years ago

阿里巴巴 DataX 源码解读专栏 https://blog.csdn.net/wantaway314/category_10728335.html

1. datax(1):编译打包使用 https://waterwang.blog.csdn.net/article/details/110952589

2. datax(2): 通过idea搭建源码阅读+调试环境 https://waterwang.blog.csdn.net/article/details/111034241

3. datax(3): win环境cmd乱码 https://waterwang.blog.csdn.net/article/details/111036461

4. datax(4): datax.py解读 https://waterwang.blog.csdn.net/article/details/112234435

5. datax(5):改造升级-自动识别py环境,执行datax任务 https://waterwang.blog.csdn.net/article/details/112241390

6. datax(6):启动步骤解析 https://waterwang.blog.csdn.net/article/details/112617108

7. datax(7):JobContainer源码解读 https://waterwang.blog.csdn.net/article/details/112718493

8. datax(8):TaskGroupContainer源码解读 https://waterwang.blog.csdn.net/article/details/112794237

9. datax(9):Job和TaskGroup的通讯机制 https://waterwang.blog.csdn.net/article/details/112795294

10. datax(10): 源码解读Communication(Datax通讯类) https://waterwang.blog.csdn.net/article/details/112850175

11. datax(11):源码解读 ContainerCommunicator https://waterwang.blog.csdn.net/article/details/112855025

12. datax(12):调度源码解读AbstractScheduler https://waterwang.blog.csdn.net/article/details/112911089

13. datax(13):源码解读Column-datax中的数据类型 https://waterwang.blog.csdn.net/article/details/112911316

14. datax(14):源码解读Channel https://waterwang.blog.csdn.net/article/details/112956397

15. datax(15):源码解读AbstractCollector https://waterwang.blog.csdn.net/article/details/112983377

16. datax(16):源码解读AbstractReporter https://waterwang.blog.csdn.net/article/details/112985829

17. datax(17):源码解读AbstractRunner https://waterwang.blog.csdn.net/article/details/113033822

waterWang commented 3 years ago

DataX(1):编译打包使用

DataX(2): 通过idea搭建源码阅读+调试环境

DataX(3): win环境cmd乱码

DataX(4): DataX.py解读

DataX(5):改造升级-自动识别py环境,执行DataX任务

DataX(6):启动步骤解析

DataX(7):JobContainer源码解读

DataX(8):TaskGroupContainer源码解读

DataX(9):Job和TaskGroup的通讯机制

DataX(10):源码解读Communication(DataX通讯类)

DataX(11):源码解读 ContainerCommunicator

DataX(12):调度源码解读AbstractScheduler

DataX(13):源码解读Column-dDataX中的数据类型

DataX(14):源码解读Channel

DataX(15):源码解读AbstractCollector

DataX(16):源码解读AbstractReporter

DataX(17):源码解读AbstractRunner

DataX(18):源码解读Transformer

DataX(19):源码解读内置Transformer

DataX(20):内置transformer使用

DataX(21):编写自己的Transformer

DataX(22):任务分配规则

DataX(23):dDataX调优

DataX(24):远程调试dDataX

DataX(25):插件加载原理

DataX(26):各个数据库与DataX字段映射

DataX(27):不太常见配置项querySql、preSql、postSql、splitPk