美文网首页
CarbonData SDK集成OSS - 测试步骤

CarbonData SDK集成OSS - 测试步骤

作者: 文竹小二 | 来源:发表于2019-02-03 19:12 被阅读8次

    1、环境搭建

    见:CarbonData集成OSS - 基础环境搭建

    2、执行如下命令

    java -classpath /home/carbondata/carbondata/assembly/target/scala-2.11/apache-carbondata-1.6.0-SNAPSHOT-bin-spark2.2.1-hadoop2.7.2.jar:/home/carbondata/carbondata/examples/spark2/target/carbondata-examples-1.6.0-SNAPSHOT.jar:/home/carbondata/hadoop-2.7.2/share/hadoop/tools/lib/:/home/carbondata/hadoop-2.7.2/share/hadoop/common/:/home/carbondata/hadoop-2.7.2/share/hadoop/mapreduce/* org.apache.carbondata.examples.sdk.SDKS3Example <access-key> <secret-key> <s3-endpoint> <table-path-on-s3>

    其中access-key,secret-key,s3-endpoint,table-path-on-s3为CarbonData oss bucket管理中提到的4个基本要素

    /home/carbondata为用户目录,carbondata和hadoop都安装在用户目录下。

    3、查看oss写是否成功

    image.png

    4、查看oss读是否成功

    图中显示9条数据被正确读取。


    image.png

    相关文章

      网友评论

          本文标题:CarbonData SDK集成OSS - 测试步骤

          本文链接:https://www.haomeiwen.com/subject/adxojqtx.html