温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

配置并启动spark的thriftserver网关

发布时间:2020-07-06 21:56:17 来源:网络 阅读:1448 作者:刀刀_高扬 栏目:大数据

1、保证spark-sql已经使用mysql作为metadata存储介质

2、启动thrift网关

$SPARK_HOME/sbin/start-thriftserver.sh --driver-class-path /usr/local/spark/spark-1.3.0-bin-hadoop2.3/lib/mysql-connector-java-5.1.6-bin.jar --master spark://hd1:7077 --executor-memory 2g --total-executor-cores 10

3、确认是否正确

beeline

>!connect jdbc:hive2://hd1:10000

user:hadoop

password:******

show databases;

show tables;

如果能够看到和本地启动的spark-sql一样的结果,就是确认成功了。


向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI