CDH6安装Lzo

2020-08-06  本文已影响0人  Rex_2013

官方安装文档
官方配置文档

环境

centos7.6
cdh6.2.1

Parcel安装Lzo

  1. 在CDH的 Parcel 配置中,“远程Parcel存储库URL”,点击 “+” 号,添加地址栏:
image.png
    CDH6:https://archive.cloudera.com/gplextras6/6.2.1/parcels/
  1. 返回Parcel列表,延迟几秒后会看到多出了 GPLEXTRAS(CDH6) 下载 -- 分配 -- 激活。
image.png
  1. 安装完LZO后,打开HDFS配置,找到“压缩编码解码器”,点击 “+” 号,添加:
com.hadoop.compression.lzo.LzoCodec
com.hadoop.compression.lzo.LzopCodec
image.png
  1. YARN配置,找到 “MR 应用程序 Classpath”(mapreduce.application.classpath)添加:
/opt/cloudera/parcels/GPLEXTRAS/lib/hadoop/lib/*
image.png
  1. 重启更新过期配置
上一篇下一篇

猜你喜欢

热点阅读