温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

hive一些问题

发布时间:2020-05-10 08:40:36 来源:网络 阅读:744 作者:1350368559 栏目:大数据

hadoop client/hive client去连接 微软云Azure上的HDI报错:


hive --service metastore

Exception in thread "main" org.apache.thrift.transport.TTransportException: Could not create ServerSocket on address 0.0.0.0/0.0.0.0:9083.

Getting MissingTableException: Required table missing VERSION when starting hive on mysql


根本原因是这里使用的是HDI


1、这两个配置文件都改(centos和ubuntu有区别)

# vim /usr/hdp/2.2.0.0-2041/hive/conf/hive-site.xml

# vim /etc/hive/conf/hive-site.xml

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration supports_final="true">
<!-- Hive Configuration can either be stored in this file or in the hadoop configuration files
 that are implied by Hadoop setup variables.                               Aside from Hadoop setup variables - this file is provided as a convenience so that Hive
 users do not have to edit hadoop configuration files (that may be managed as a centralized 
 resource).    
-->
<property>
    <name>hive.metastore.warehouse.dir</name>
    <value>/hive/warehouse</value>
    <description>location of default database for the warehouse</description>
  </property>
  <property>
   <name>hive.metastore.uris</name>
    <value>thrift://headnodehost:9083</value>
    <description>Thrift URI for the remote metastore. Used by metastore client to connect to remote metastore.</description>
  </property>
</configuration>

   

2、修改hosts

vim /etc/hosts

内容是来自于HDI的windows机器上的配置

 10.0.2.7        headnodehost    # SlaveNodeManager
 10.0.2.7        jobtrackerhost  # SlaveNodeManager
 10.0.2.7        namenodehost    # SlaveNodeManager



hive普通用户报错:


1、报错

Booting Derby (version The Apache Software Foundation - Apache Derby - 10.10.1.1 - (1458268)) instance a816c00e-0154-2ed3-cbb2-00000e1ebc98 

on database directory /var/lib/hive/metastore/metastore_db in READ ONLY mode with class loader sun.misc.Launcher$AppClassLoader@7cc355be. 

Loaded fromfile:/usr/hdp/2.2.0.0-2041/hive/lib/derby-10.10.1.1.jar.


问题:明显是metastore数据库read only,没有写权限


解决办法:

# cd /var/lib/hive/metastore/

# chmod -R a+w metastore_db/


2、报错如下,但是hive还是进来了

Booting Derby version The Apache Software Foundation - Apache Derby - 10.10.1.1 - (1458268): instance a816c00e-0154-3155-87b8-00000e0b5a08 

on database directory /var/lib/hive/metastore/metastore_db with class loader sun.misc.Launcher$AppClassLoader@7cc355be 

Loaded from file:/usr/hdp/2.2.0.0-2041/hive/lib/derby-10.10.1.1.jar

java.vendor=Oracle Corporation

java.runtime.version=1.8.0_51-b16

user.dir=/var/lib/hive

os.name=Linux

os.arch=amd64

os.version=2.6.32-573.1.1.el6.x86_64

derby.system.home=null

Database Class Loader started - derby.database.classpath=''

hive> 

   > 

还是权限问题:/var/lib/hive# chown -R hive:hive metastore/


向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI