美文网首页
Hadoop简单操作

Hadoop简单操作

作者: 两只cows | 来源:发表于2020-03-22 21:03 被阅读0次

因为cdh默认的超级用户是hdfs,所以首先要切换用户(添加超级用户组也可以)

su hdfs

1.创建文件夹命令

hdfs dfs -mkdir /rsdata

2.查看当前目录信息

hdfs dfs -ls /

3.上传文件命令

hdfs dfs -put /本地路径 /hdfs路径

4.剪切文件 

hdfs dfs -moveFromLocal a.txt /aa.txt

5.下载文件到本地

hdfs dfs -get /hdfs路径 /本地路径

6.合并下载

hdfs dfs -getmerge /hdfs路径文件夹 /合并后的文件

7.创建文件夹

hdfs dfs -mkdir /hello

8.创建多级文件夹

hdfs dfs -mkdir -p /hello/world

9.移动hdfs文件

 hdfs dfs -mv /hdfs路径 /hdfs路径

10.复制hdfs文件

 hdfs dfs -cp /hdfs路径 /hdfs路径

11.删除hdfs文件

hdfs dfs -rm /aa.txt

12.删除hdfs文件夹

hdfs dfs -rm -r /hello

13.查看hdfs中的文件

hdfs dfs -cat /文件

hdfs dfs -tail -f /文件

14.查看文件夹中有多少个文件

hdfs dfs -count /文件夹

15.查看hdfs的总空间

hdfs dfs -df /        hdfs dfs -df -h /       

 16.修改副本数   

 hdfs dfs -setrep 1 /a.txt

相关文章

  • Hadoop简单操作

    因为cdh默认的超级用户是hdfs,所以首先要切换用户(添加超级用户组也可以) su hdfs 1.创建文件夹命令...

  • Hadoop 与 Hbase基本操作与配置

    hadoop搭建 目的 本文档主要讲述如何快速搭建单节点hadoop以及一些简单map reduce操作和一些HD...

  • hadoop-HDFS的简单操作

    【1】是什么? http://hadoop.apache.org/docs/r1.0.4/cn/mapred_tu...

  • Hadoop 安装和使用

    环境 操作系统:Ubuntu 14.04 Hadoop版本:Hadoop 2.6.5 JDK版本:OpenJDK ...

  • Hive入门

    Hive入门 复习Hadoop: 1、Hadoop是什么 2、HDFS的访问方式 3、Hadoop的常用操作 问题...

  • hadoop学习大纲

    Hadoop集群环境搭建 Hadoop集群环境搭建 HDFS 图说HDFS基本原理hadoop的shell命令操作...

  • Hadoop课程大纲

    Hadoop集群环境搭建 Hadoop集群环境搭建 HDFS 图说HDFS基本原理hadoop的shell命令操作...

  • 教你安装单机版Hadoop,初学必备

    hadoop单机安装 操作系统:centos7.4cdh的hadoop发行版:hadoop-2.6-chd5.15...

  • Hadoop课程大纲

    Hadoop集群环境搭建 Hadoop集群环境搭建 HDFS 图说HDFS基本原理hadoop的shell命令操作...

  • Hadoop 课程大纲

    Hadoop集群环境搭建 Hadoop集群环境搭建 HDFS 图说HDFS基本原理hadoop的shell命令操作...

网友评论

      本文标题:Hadoop简单操作

      本文链接:https://www.haomeiwen.com/subject/sfqbyhtx.html