Hive的安装配置

时间:2023-03-08 21:17:51
Hive的安装配置

Hive的安装配置

Hive的安装配置

安装前准备

下载Hive版本1.2.1:

1.[root@iZ28gvqe4biZ ~]# wget http://mirror.bit.edu.cn/apache/hive/stable/apache-hive-1.2.1-bin.tar.gz

解压hive:

1.[root@iZ28gvqe4biZ ~]#  tar -xvzf apache-hive-1.2.1-bin.tar.gz 

复制hive文件到/u01/bigdata/data/hive:

1.mv apache-hive-1.2.1-bin /u01/bigdata/data/hive

修改环境变量:

vim /etc/profile加入如下内容:

1.# set hive path
2.export HIVE_HOME=/u01/bigdata/data/hive
3.export PATH=$HIVE_HOME /bin:$PATH

刷新一下,. /etc/profile

整体的环境变量设置如图:

Hive的安装配置

Hive配置

配置文件复制 :

1.[root@iZ28gvqe4biZ hive]# ls
2.bin conf examples hcatalog lib LICENSE NOTICE README.txt RELEASE_NOTES.txt scripts
3.[root@iZ28gvqe4biZ hive]# cd conf/
4.[root@iZ28gvqe4biZ conf]# ls
5.beeline-log4j.properties.template hive-exec-log4j.properties.template
6.hive-default.xml.template hive-log4j.properties.template
7.hive-env.sh.template ivysettings.xml
8.[root@iZ28gvqe4biZ conf]# cp hive-default.xml.template hive-default.xml
9.[root@iZ28gvqe4biZ conf]# cp hive-exec-log4j.properties.template hive-exec-log4j.properties
10.[root@iZ28gvqe4biZ conf]# cp hive-log4j.properties.template hive-log4j.properties
11.[root@iZ28gvqe4biZ conf]# cp beeline-log4j.properties.template beeline-log4j.properties
12.[root@iZ28gvqe4biZ conf]# cp hive-env.sh.template hive-env.sh

拷贝Mysql连接驱动:

下载mysql-connector-java.jar:

http://dev.mysql.com/downloads/connector/j/

或者

1.[root@iZ28gvqe4biZ ~]# wget http://dev.mysql.com/get/Downloads/Connector-J/mysql-connector-java-5.1.38.tar.gz

解压拷贝驱动:

1.[root@iZ28gvqe4biZ ~]# tar -zxvf mysql-connector-java-5.1.38.tar.gz 
2.[root@iZ28gvqe4biZ ~]# ls
3.apache-hive-1.2.1-bin.tar.gz jdk-8u72-linux-x64.rpm mysql-connector-java-5.1.38.tar.gz
4.hadoop-2.7.2.tar.gz mysql-connector-java-5.1.38
5.[root@iZ28gvqe4biZ ~]# cd mysql-connector-java-5.1.38/
6.[root@iZ28gvqe4biZ mysql-connector-java-5.1.38]# ls
7.build.xml COPYING mysql-connector-java-5.1.38-bin.jar README.txt
8.CHANGES docs README src
9.[root@iZ28gvqe4biZ mysql-connector-java-5.1.38]# cp mysql-connector-java-5.1.38-bin.jar /u01/bigdata/data/hive/lib/

修改配置文件

修改$HIVE_HOME/bin/hive-config.sh增加以下配置:vim $HIVE_HOME/bin/hive-config.sh

1.export JAVA_HOME=/usr/java/jdk1.8.0_72
2.export HADOOP_HOME=/u01/bigdata/data/hadoop
3.export HIVE_HOME=/u01/bigdata/data/hive

修改$HIVE_HOME/conf/hive-env.sh:vim $HIVE_HOME/conf/hive-env.sh

1.export HADOOP_HOME=/u01/bigdata/data/hadoop
2.export HIVE_CONF_DIR=/u01/bigdata/data/hive/conf

修改$HIVE_HOME/conf/hive-site.xml:vim $HIVE_HOME/conf/hive-site.xml

(暂定,不正确,请按照自己的实际来编写)

1. <property>
2. <name>hive.metastore.warehouse.dir</name>
3. <value>hdfs://master:9000/hive/warehouse</value>
4. </property>
5. <property>
6. <name>hive.exec.scratchdir</name>
7. <value>hdfs://master:9000/hive/scratchdir</value>
8. </property>
9. <property>
10. <name>hive.metastore.warehouse.dir</name>
11. <value>/u01/bigdata/data/hive/warehouse</value>
12. </property>
13. <property>
14. <name>hive.querylog.location</name>
15. <value>/u01/bigdata/data/hive/logs</value>
16. </property>
17. <property>
18. <name>javax.jdo.option.ConnectionURL</name>
19. <value>jdbc:mysql://master:3306/hivemeta?createDatabaseIfNotExist=true</value>
20. </property>
21. <property>
22. <name>javax.jdo.option.ConnectionDriverName</name>
23. <value>com.mysql.jdbc.Driver</value>
24. </property>
25. <property>
26. <name>javax.jdo.option.ConnectionUserName</name>
27. <value>hdp</value>
28. </property>
29. <property>
30. <name>javax.jdo.option.ConnectionPassword</name>
31. <value>hdp</value>
32. </property>

创建目录,并赋权

1.[root@iZ28gvqe4biZ ~]# hdfs dfs -mkdir /hive
2.[root@iZ28gvqe4biZ ~]# hdfs dfs -mkdir /hive/scratchdir
3.[root@iZ28gvqe4biZ ~]# hdfs dfs -mkdir /hive/warehouse
4.[root@iZ28gvqe4biZ ~]# hdfs dfs -chmod g+w /hive/scratchdir
5.[root@iZ28gvqe4biZ ~]# hdfs dfs -chmod g+w /hive/warehouse
6.[root@iZ28gvqe4biZ ~]# mkdir -p /u01/bigdata/data/hive/warehouse
7.[root@iZ28gvqe4biZ ~]# mkdir -p /u01/bigdata/data/hive/logs

Hive启动与测试

启动hive

1.[root@iZ28gvqe4biZ ~]# nohup hive --service metastore -v &

测试

1.[root@iZ28gvqe4biZ ~]#  hive
2.hive>