winway / commentRepo

commenyRepo
0 stars 0 forks source link

大数据开发之路-概述 | winway's blog #3

Open winway opened 2 years ago

winway commented 2 years ago

https://winway.github.io/2022/05/02/bigdata-stack-intro/

前言 一、熟悉大数据相关组件的原理、特点和使用场景 二、熟悉常见架构设计 三、开发能力 参考资料 导引 大数据开发之路-概述 flume-高度定制化的日志采集传输系统 sqoop-rdbms和hadoop之间的数据同步工具 datax-多种异构数据源间的高效数据同步工具 canal-基于MySQL binlog的增量同步工具 hdfs-大数据生态系统的存储基石 hbase-基于hdfs