美文网首页
MappReduce的第一个实例WordCount

MappReduce的第一个实例WordCount

作者: 记得_5d12 | 来源:发表于2018-04-19 10:39 被阅读0次

    一、在本地的文件系统中写一个words文件,里面随便放一下单词

    words文件

    二、将hadoop启动,jps查看是否启动成功。

    三、将第一步的文件传到hdfs文件系统上,hadoop dfs -put words /data/words命令(文件夹根据个人不同!)

    上传并查看

    四、编写java代码

    不做过多解释,我也是在网上找的代码,有些地方也不是很熟悉。直接贴代码了。

    目录结构 mapper reduce 主方法

    五、将代码打包成jar文件,上传到linux服务器上

    jar包

    六、运行jar文件

    命令:hadoop  jar  WordCount.jar


    运行成功

    七、验证结果

    多出了这个目录 查看目录中的文件 查看文件的数据

    相关文章

      网友评论

          本文标题:MappReduce的第一个实例WordCount

          本文链接:https://www.haomeiwen.com/subject/uugikftx.html