美文网首页
Linux下打包运行MR程序

Linux下打包运行MR程序

作者: 一叶知秋秋秋秋秋秋 | 来源:发表于2018-08-07 16:00 被阅读0次

1.编写MR程序;[用find命令找到hadoop官方自带的WordCount.java]

2.编译xx.java源文件【javac  WordCount.java】

3.打包jar 【jar  -cvf  WordCount.jar  ./WordCount*】

4.运行jar 【 hadoop  jar  WordCount.jar org.apache.hadoop.examples.WordCount  input  output】


注意:

1.WordCount前面要将包名写完整;

2.input和output是hdfs目录,可用hadoop命令创建目录并准备输入文件[hadoop fs -mkdir /user/bdp/intput],[hadoop fs -put /home/bdp/a.txt /user/bdp/input];

3.output目录不需要提前创建;

相关文章

网友评论

      本文标题:Linux下打包运行MR程序

      本文链接:https://www.haomeiwen.com/subject/xsravftx.html