美文网首页农机轨迹分析
Hadoop spark常用命令

Hadoop spark常用命令

作者: 至极L | 来源:发表于2017-10-26 09:44 被阅读63次

查看Hadoop集群运行情况 网址 http://localhost:50070/
查看spark集群运营情况网址 http://master:8080/

将数据加载到hadoop

hdfs dfs -mkdir /dbtac
hdfs dfs -put /win/test   /dbtac
hdfs dfs -ls  /dbtac/tac
hdfs dfs -put /win/test/test10.csv   /dbtac/test

hdfs dfs -rm -r  /dbtac  #删除dbtac文件夹

另附如何将window上的共享目录加载到Ubuntu,共享window的数据

sudo apt-get install cifs-utils
sudo mkdir  /win
 sudo mount -t cifs  -o username=xiaojing,password=xxx  //192.168.17.122/mydata  /win

相关文章

网友评论

    本文标题:Hadoop spark常用命令

    本文链接:https://www.haomeiwen.com/subject/wwrfpxtx.html