温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

Linux系统如何安装数据存储Hive

发布时间:2022-01-24 11:02:05 来源:亿速云 阅读:91 作者:小新 栏目:开发技术

小编给大家分享一下Linux系统如何安装数据存储Hive,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

hive是基于Hadoop的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。

Hive简介:

  • Facebook为了解决海量日志数据的分析而开发了Hive,后来开源给了Apache软件基金会。

  • Hive是一种用类SQL语句来协助读写、管理那些存储在分布式存储系统上大数据集的数据仓库软件。

  • Hive的数据是存储在HDFS上的。Hive中的库和表可以看作是对HDFS上数据做的一个映射。所以Hive必须是运行在一个Hadoop集群上的。

Linux系统安装Hive详细步骤:

1) 解压Hive文件:

tar -zxf /opt/soft/apache-hive-2.1.1-bin.tar.gz -C /opt/

2) 修改名称: mv apache-hive-2.1.1-bin/ hive

3) 添加环境变量:vim /etc/profile.d/hadoop-ect.sh

export HIVE_HOME=/opt/hive

export PATH=HIVE_HOME/bin

使环境变量生效

source /etc/profile.d/hadoop-etc.sh

4) 进入cd/opt/hive/conf/修改文件

cp  hive-env.sh.template  hive-env.sh

cp  hive-default.xml.template  hive-site.xml

5) 修改$HIVE_HOME/conf的hive-env.sh,增加以下三行

export JAVA_HOME=/opt/jdk

export HADOOP_HOME=/opt/hadoop

export HIVE_HOME=/opt/hive

6) 修改$HIVE_HOME/conf/hive-site.xml

javax.jdo.option.ConnectionURL

jdbc:mysql://lky01:3306/hive?createDatabaseIfNotExist=true

javax.jdo.option.ConnectionDriverName

com.mysql.jdbc.Driver

javax.jdo.option.ConnectionUserName

root

javax.jdo.option.ConnectionPassword

root

hive.querylog.location

/opt/hive/tmp

hive.exec.local.scratchdir

/opt/hive/tmp

hive.downloaded.resources.dir

/opt/hive/tmp

7) 拷贝mysql驱动到/opt/hive/lib/目录

cp /opt/soft/mysql-connector-java-5.1.39.jar /opt/hive/lib/

8) 初始化hive元数据仓库

执行目录$HIVE_HOME/bin

./schematool -initSchema -dbType mysql -userName root -passWord 123456

9) 启动hive

Hive] bin/hive -hiveconf hive.cli.print.current.db=true

以上是“Linux系统如何安装数据存储Hive”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注亿速云行业资讯频道!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI