pengkobe / reading-notes

:stars: to record daily reading notes. I build an issue blog to record daily FE study notes. suggestion and comments are welcomed.
https://github.com/pengkobe/reading-notes/issues
MIT License
13 stars 1 forks source link

hadoop #496

Open pengkobe opened 5 years ago

pengkobe commented 5 years ago

可以在不了解分布式底层细节的情况下,开发分布式程序。使你能够充分利用集群的威力进行高速运算和存储。 框架最核心的设计是: HDFS + MapReduce,HDFS为海量的数据提供了存储,而 MapReduce 则为海量的数据提供了计算。

小评

有些东西看似很复杂很高大上,在经过抽象之后,其实没有想象的那么复杂,就像是操作系统很复杂,但是你用电脑的门槛还是很低的。hadoop 底层的设计的确很复杂,分布式文件系统加分布式计算,但是你进行编程时只需要按照正常的编程思维来就 ok。