Hadoop理论知识

2017-08-25  本文已影响0人  夙夜M

1、hadoop的概念:分布式文件存储和计算框架

hdfs:使用分布式思想存储海量数据

MapReduce:分布式计算程序的编程框架

2、hadoop的副本存放策略

上传和下载底层原理

3、hive的概念

hive是由Facebook实现并开源的一款基于hadoop的类SQL数据仓库工具,

使用HQL查询功能将结构化的数据映射为一张数据库表,底层数据存储在hdfs,

Hive的本质是将HQL语句转化为MR任务运行,使不熟悉MapReduce的用户能够根据HQL语句进行数据ETL操作。

4、zookeeper的选举算法

上一篇 下一篇

猜你喜欢

热点阅读