美文网首页
spark sql 配置

spark sql 配置

作者: 泡泡坪 | 来源:发表于2018-11-13 09:57 被阅读0次

    spark sql 配置
    cp HIVE_HOME/conf/hive-site.xmlSPARK_HOME/conf
    cp HADOOP_HOME/etc/hadoop/hdfs-site.xmlSPARK_HOME/conf
    ./bin/spark-shell --master yarn-client --jars /usr/local/src/apache-hive-0.13.0-bin/lib/mysql-connector-java-5.1.41-bin.jar

    val df = spark.sql("select * from test_a limit 10")
    看能不能取到hive的表的

    相关文章

      网友评论

          本文标题:spark sql 配置

          本文链接:https://www.haomeiwen.com/subject/xadkfqtx.html