1. Hive mysql的metastore安装准备
把hive-0.12.0.tar.gz解压到/zzy/
# tar -zxvf hive-0.12.0.tar.gz -C /zzy (-C 指定解包后的路径)
修改/etc/profile文件,将hive加入环境变量
# vim /etc/profile
export JAVA_HOME=/usr/java/jdk1.7.0_79
export HADOOP_HOME=/itcast/hadoop-2.4.1
export HIVE_HOME=/itcast/hive-0.12.0
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$HIVE_HOME/bin
Source 一下,让配置生效
# source /etc/profile
安装完毕!
提示:metastore是hive元数据的集中存放地。metastore默认使用内嵌的derby数据库作为存储引擎。Derby引擎的缺点:一次只能打开一个会话,使用Mysql作为外置存储引擎,多用户同时访问。
2. 安装mysql数据库
(注意:没网络,可以配置好本地yum源 请参考本博客 Hadoop 之配置本地yum 源)
# yum -y install mysql-server
启动mysql数据库
# service mysqld start
初始化mysql数据库(默认root的密码为空,按提示一步步完成)
# /usr/bin/mysql_secure_installation
将mysql加入开机启动
# chkconfig mysqld on
允许远程登录mysql
首先登录mysql数据,然后执行下面两行语句: (登陆mysql:mysql –u用户名 –p密码)
a. GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY zzy WITH GRANT OPTION;
b.flush privileges; (mysql 新设置用户或更改密码后需用flush privileges刷新MySQL的系统权限相关表,否则会出现拒绝访问,
还有一种方法,就是重新启动 mysql服务器,来使新设置生效。)
修改$HIVE_HOME/bin的hive-config.sh,增加以下三行
export JAVA_HOME=/usr/java/jdk1.7.0_79
export HIVE_HOME=/itcast/hive-0.12.0
export HADOOP_HOME=/itcast/hadoop-2.4.1
3. 配置MySQL的metastore
a.上传数据库驱动mysql-connector-java-5.1.28.jar到/zzy/hive-0.12.0/lib
b.修改$HIVE_HOME/conf/hive-site.xml
# vim /zzy/hive-0.12.0/conf/hive-site.xml (cp hive-default.xml.template hive-site.xml)
<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>lg</value>
</property>
</configuration>
配置完毕!
4. 测试配置是否正确
启动hive (输入 #hive --service cli 启动)
# hive
创建数据库
hive> create database test_db;
显示所有数据库
show databases;
使用数据库test_db
hive> use test_db;
创建学生表
hive> create table student(id int,name string);
查看是否在HDFS中存有下面文件夹
http://19.168.0.140:50070/explorer.html#/user/hive/warehouse/test_db.db/student
---------------------------------------bug----------------------------------------
1. service mysqld start
Another MySQL daemon already running with the same unix socketservice mysqld stop
mv /var/lib/mysql/mysql.sock /var/lib/mysql/mysql.sock.bak
service mysqld start
2. hive> create database test_db;
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.metastore.HiveMetaStoreClient
3. 用客户端sqlyog 链接数据库的时候报错
1045 access denied for user 'root'@'localhost' using password yes
解决方案:如下
# /etc/init.d/mysql stop
# mysqld_safe --user=mysql --skip-grant-tables --skip-networking &
# mysql -u root mysql
mysql> UPDATE user SET Password=PASSWORD(’newpassword’) where USER=’root’;
mysql> FLUSH PRIVILEGES;
mysql> quit
# /etc/init.d/mysql restart
# mysql -uroot -p
Enter password: <输入新设的密码newpassword>
mysql>