美文网首页
EMR 记录

EMR 记录

作者: boyier | 来源:发表于2019-06-08 18:21 被阅读0次

    按照emr文档创建了emr集群,创建好使用putty连接,显示链接超时(见下图),

    连接超时

    使用Git通过命令行还是连接超时。

    不理会。测试搭建的集群是否可以分析数据?下面信息显示:可以。

    hive操作结果

    说明集群是可以使用的,但是无法连接。

    换账号登录,成功连接

    这是什么情况???

    用aws cli 对s3存储的数据调用,下载aws cli 。先下载docker,pip(还有一种方法,用aws msi 安装cli,强烈拒绝)。

    aws cli文档链接 :https://docs.aws.amazon.com/zh_cn/cli/latest/userguide/cli-chap-welcome.html

    下载docker时win10家庭版的要下载Docker Toolbox,只有win10专业版可以安装docker for windows(一般电脑装的是win10 家庭版

    安装Docker Toolbox 链接:https://docs.docker.com/toolbox/toolbox_install_windows/

    安装docker出现镜像错误

    安装pip,出现镜像错误

    错错错

    我佛了

    直接到官网下载pip脚本而不是通过命令行下载,

    搞定,pip安装成功。

    用pip安装aws cli

    搞定

    相关文章

      网友评论

          本文标题:EMR 记录

          本文链接:https://www.haomeiwen.com/subject/knybxctx.html