美文网首页
zeppelin初试

zeppelin初试

作者: brucewu_2008 | 来源:发表于2018-01-18 14:51 被阅读0次

    代码下载及编译, 或者发布包下载

    git clone https://github.com/apache/zeppelin.git
    mvn clean package -DskipTests -Pscala-2.11 -Pbuild-distr
    =====
    http://zeppelin.apache.org/download.html
    

    配置

    conf/zeppelin-site.xml
    conf/zeppelin-env.sh
    这里只设置

    export SPARK_HOME=
    export SPARK_SUBMIT_OPTIONS=
    export HADOOP_CONF_DIR=
    及zepplin的监听端口。 
    

    我用的是spark-2.2

    启动

    ./bin/zepplin-daemon.sh start
    

    建立notebook

    zepplin.png

    错误处理

    java.lang.NullPointerException
        at org.apache.zeppelin.spark.Utils.invokeMethod(Utils.java:38)
        at org.apache.zeppelin.spark.Utils.invokeMethod(Utils.java:33)
        at org.apache.zeppelin.spark.SparkInterpreter.createSparkContext_2(SparkInterpreter.java:398)
        at org.apache.zeppelin.spark.SparkInterpreter.createSparkContext(SparkInterpreter.java:387)
        at org.apache.zeppelin.spark.SparkInterpreter.getSparkContext(SparkInterpreter.java:146)
        at org.apache.zeppelin.spark.SparkInterpreter.open(SparkInterpreter.java:843)
        at org.apache.zeppelin.interpreter.LazyOpenInterpreter.open(LazyOpenInterpreter.java:70)
        
    删除 hadoop-annotations-2.6.0.jar/hadoop-auth-2.6.0.jar/hadoop-common-2.6.0.jar, 从spark对应的目录下的jars拷贝2.7.3对应的版本。重启zepplin。 
    

    参考资料

    https://zeppelin.apache.org/docs/latest/install/install.html#downloading-binary-package

    相关文章

      网友评论

          本文标题:zeppelin初试

          本文链接:https://www.haomeiwen.com/subject/zhlwoxtx.html