美文网首页农机轨迹分析
Hadoop spark常用命令

Hadoop spark常用命令

作者: 至极L | 来源:发表于2017-10-26 09:44 被阅读63次

    查看Hadoop集群运行情况 网址 http://localhost:50070/
    查看spark集群运营情况网址 http://master:8080/

    将数据加载到hadoop

    hdfs dfs -mkdir /dbtac
    hdfs dfs -put /win/test   /dbtac
    hdfs dfs -ls  /dbtac/tac
    hdfs dfs -put /win/test/test10.csv   /dbtac/test
    
    hdfs dfs -rm -r  /dbtac  #删除dbtac文件夹
    

    另附如何将window上的共享目录加载到Ubuntu,共享window的数据

    sudo apt-get install cifs-utils
    sudo mkdir  /win
     sudo mount -t cifs  -o username=xiaojing,password=xxx  //192.168.17.122/mydata  /win
    

    相关文章

      网友评论

        本文标题:Hadoop spark常用命令

        本文链接:https://www.haomeiwen.com/subject/wwrfpxtx.html