OctopusLian / leetcode-solutions

LeetCode,LintCode,牛客网,企业题库,《Sword to Offer》,《Cracking the Coding Interview》题解
MIT License
4 stars 4 forks source link

每日一题:数据仓库是怎么分层的?(京东大数据) #115

Closed OctopusLian closed 2 years ago

OctopusLian commented 4 years ago

https://blog.csdn.net/weixin_48502062/article/details/107965874 一般都是分 ODS -> DW -> APP: ODS(Operational Data Store)就是将各种数据源的数据,经过清洗整理到这里的这一层。一般涉及各种ETL工具,我们用的时sqoop。 DW(Data WareHouse),数据仓库层,指的是经过抽象,模块化的数据,可以有训练好的模型。 APP(Application),应用层,在这一层制作各种报表展示,提供各种对外开放的中间件,例如ES,Spark等等。