大数据开发

[原理]”任务向数据靠拢”~任务调度时候都会考虑数据本地化

2016-10-21  本文已影响4人  葡萄喃喃呓语

SparkSQL读取HBase数据 – lxw的大数据田地
http://lxw1234.com/archives/2015/07/330.htm
Spark和Hadoop MapReduce一样,在任务调度时候都会考虑数据本地化,即”任务向数据靠拢”,尽量将任务分配到数据所在的节点上运行。

上一篇 下一篇

猜你喜欢

热点阅读