pig安装

作者: zhangxu0636 | 来源:发表于2016-07-14 08:43 被阅读59次

1.下载Pig,网址:http://hadoop.apache.org/pig/releases.html

2.解压到指定目录。

3.配置环境变量,在~/.bashrc中。

4.配置结果:

#这里我用了0.15这个版本的pig,hadoop版本为2.6.0
export PIG_HOME=/root/pig/pig-0.15
export PATH=$PATH:$PIG_HOME/bin
#启动mapreduce模式使用。
export PIG_CLASSPATH=$HADOOP_HOME/conf/

总结常见错误:

当时安装完pig的时候,启动pig时候报了错:
Terminal initialization failed; falling back to unsupported
java.lang.IncompatibleClassChangeError: Found class jline.Terminal, but interface was expected
这个原因是因为在yarn/lib下面的jar包不对,这时候要将pig下面的lib文件夹下面的jline jar包拷贝到yarn/lib,删除原来的jar包,重新启动hadoop集群,并且再次启动pig就行了。

相关文章

  • pig安装

    1.下载Pig,网址:http://hadoop.apache.org/pig/releases.html。 2....

  • pig 导出导入

    1. 安装pig 下载 pig-0.17.0.tar.gz解压到~/ 2. 编写pig 导出脚本 3. 将 pho...

  • pig 编译及安装

    这篇文章我写的是集群方式的,如果是单节点且不需要持久化可以参考文章https://www.jianshu.com/...

  • Pig | 安装与操作

    pig Pig是一个用来处理大规模数据集的平台,由Yahoo贡献给ApachePig方便不熟悉java的用户,使用...

  • Pig 安装及使用

    一、Pig简介 1、Pig与Mapreduce当业务比较复杂的时候,使用MapReduce将会是一个很复杂的事情,...

  • pig pig

    Many words, like man is a pig, he never found the beauty ...

  • pig pig

    有一只小黑猪和小白猪,它们很相爱。小黑猪总把寻觅到的好吃的给小白猪,看着小白猪白白胖胖的模样,小黑猪就觉的心里成功...

  • Pig安装及入门案例

    【前言】相比Java的MapReduce api,Pig为大型数据集的处理提供了更高层次的抽象,与MapReduc...

  • Pig从入门到精通2:Pig安装配置

    Pig的安装模式有两种:本地模式和MapReduce模式(集群模式)。二者的区别是:本地模式操作的是本地Linux...

  • 万科V-learn父母学院-小西妈双语工程1706期217号ke

    Listening: peppa pig Video: peppa pig Reading: hennimann ...

网友评论

      本文标题:pig安装

      本文链接:https://www.haomeiwen.com/subject/iwjejttx.html