美文网首页
启动集群--上传数据--使用API获取数据

启动集群--上传数据--使用API获取数据

作者: 付晓聪 | 来源:发表于2017-10-21 21:59 被阅读0次

大数据旅程第一步

1、启动centso后第一件事就是要关闭防火墙(开发模式下),否则将有无穷无尽的惊喜!!!     

(1)查看防火墙状态:sudo service iptables status

(2)关闭防火墙:sudo service iptables stop

(3)永久关闭防火墙:sudo chkconfig iptables off

(4)打开防火墙:sudo service iptables start

2、清空/tmp中的数据:

$cd /tmp    

$sudo rm -rf *

3、清空日志中的数据:

$cd downloads/hadoop-2.7.2/logs/               

$rm -rf *

4、格式化:

$hadoop namenode -format

5、启动集群:

$start-all.sh

6、创建文件夹:

$hdfs dfs -mkdir -p /user/centos/hadoop

7、上传数据:

$hdfs dfs -put index.html hadoop

8、获取数据:

注:

使用Hadoop API之前一定要先配置环境变量

和配置java环境类似

相关文章

  • 启动集群--上传数据--使用API获取数据

    大数据旅程第一步 1、启动centso后第一件事就是要关闭防火墙(开发模式下),否则将有无穷无尽的惊喜!!! ...

  • File API 文件API

    例:文件API获取到上传的数据 css样式: body { position: relative; } .file...

  • axios学习笔记

    一、axios的基本使用 get,获取数据 post,提交数据(表单提交以及文件上传) put,更新数据 (提交所...

  • RestTemplate 基本使用方法

    一、通过GET方式获取数据 1.通过GET请求获取json数据让我们使用getForEntity()API发起一个...

  • 学会开发灵活的网页(Javascript)

    3.7、使用 JSON 和 AJAX传递api数据(使用vue和reqwest实现用其它网站获取数据并传入本网站(...

  • Flurry 分析 API 中文教程(Flurry Analyt

    本文记录使用 API 获取 Flurry Analytics 报告的文档。 包含前期准备、API基础、数据详情、请...

  • 2017.5.25

    今日所学 Python与数据获取 获取数据的另一种方式:API 数据绘图基础:Matplotlib 绘图API:p...

  • HDFS中API的使用

    在项目开发中,有时我们需要通过HDFS的api来对文件进行操作,比如将数据上传到HDFS或者从HDFS获取数据等。...

  • 微博API数据的保存与处理

    在“获取新浪微博API数据”一文中,我们介绍了如何利用新浪微博api来获取数据。在本文中,我们将介绍如何使用pyt...

  • ShareExtension数据处理

    在获取到分享数据的NSItemProvider去解析数据时,使用系统提供了相应的API // Returns YE...

网友评论

      本文标题:启动集群--上传数据--使用API获取数据

      本文链接:https://www.haomeiwen.com/subject/gzywuxtx.html