我爱编程

初始Hadoop

2018-05-15  本文已影响0人  怀夕

一、大数据的定义

        大数据=5V+1C

        5V:variety(多样化),volume(海量),velocity(快速),vitality(灵活),value(价值)

        1C:complexity(复杂性)


二、hadoop的定义

       广义:以hadoop为主的生态圈,包括hadoop,flume......

       狭义:hadoop=Apache hadoop——网址:hadoop.apache.org


三、hadoop的三大组件

       三大组件:存储、计算、资源和作业调度

       hadoop的三个版本:hadoop1.x,hadoop2.x,hadoop3.x

       hadoop1.x:HDFS(存储)+MapReduce(计算、资源和作业调度)

       hadoop2.x:HDFS(存储)+MapReduce(计算)+YARN(资源和作业调度平台)

注:目前企业多用hadoop2.x,HDFS和MapReduce都是跑在YARN平台上。


上一篇下一篇

猜你喜欢

热点阅读