pig 编译及安装

2020-04-06  本文已影响0人  后端老鸟

这篇文章我写的是集群方式的,如果是单节点且不需要持久化可以参考文章https://www.jianshu.com/p/fe257adc331d

1. 安装环境说明

必须安装:
Hadoop 2.X
Java 1.7+

选择性安装:
Python 2.7(当使用Streaming Python UDFs)
Ant 1.8+(编译时用,pig有自带的,可以不装)

2.源码下载并编译

目前最新版本是0.17.0,源码下载地址是
http://mirrors.hust.edu.cn/apache/pig/latest/pig-0.17.0-src.tar.gz
将压缩包解压到某个目录,并进入源码目录,执行ant命令

ant

慢慢等待吧....
编译完成之后:


image.png
image.png

验证编译完的jar包,下面这个命令会执行很长时间,可以不验证

ant test

【转载请注明出处】:https://www.jianshu.com/p/c610bd6cda63

上一篇下一篇

猜你喜欢

热点阅读