hadoop中hive启动不成功的原因

hive
示例:Hive是构建在Hadoop上的数据仓库,其最初的主要目的是存储和处理Facebook每天产生的海量社交网络数据。此外Hive充分利用了MapReduce编程技术,还为数据仓库管理提供了数据ETL(提取、转换和加载)工具、数据存储管理及海量数据的查询和分析等功能

问题描述

例如:hive启动不成功原因


原因分析:

1.zookeeper集群以及hdfs和yarn未启动成功
2.查看报错信息
3.未开启mysql


解决方案:

zookeeper集群以及hdfs和yarn未启动成功

1>启动zookeeper,使用命令zkServer.sh start 如果这个进程已存在,需使用命令kill -9 7419

将其杀死在重新启动,查看集群状态zkServer.sh status

hadoopzkfc未启动 hadoop启动失败怎么办_hive

2>通过jps命令查看hdfs和yarn是否启动jps

hadoopzkfc未启动 hadoop启动失败怎么办_hive_02


3>如果未启动可使用命令

[root@master ~]# start-dfs.sh
[root@master ~]# start-yarn.sh

hadoopzkfc未启动 hadoop启动失败怎么办_hadoop_03


4>全部启动成功,使用jps命令,查看启动进程

hadoopzkfc未启动 hadoop启动失败怎么办_大数据_04

查看报错信息

根据报错信息查看为何会启动不成功



hadoopzkfc未启动 hadoop启动失败怎么办_Hive_05


master处于待机状态,去slave1中杀死namenode在slave01中查看jps

hadoopzkfc未启动 hadoop启动失败怎么办_大数据_06


将jps中的namenode杀掉。kill -9 4466 在通过jps查看进程

hadoopzkfc未启动 hadoop启动失败怎么办_Hive_07


回到master中,[root@master ~]# stop-all.sh先停止yarn和hdfs启动,之后使用命令

[root@master ~]# start-dfs.sh
[root@master ~]# start-yarn.sh

重新启动。
注:参考1.启动zookeeper。

3.未开启mysql

启动mysql
[root@master ~]# mysql -u root -p

hadoopzkfc未启动 hadoop启动失败怎么办_hadoop_08


进一下mysql之后退出,即可进入hive中

[root@master ~]# hive

hadoopzkfc未启动 hadoop启动失败怎么办_Hive_09


在Hive中执行以下命令hive> select 1+1;,测试Hive是否正常

hadoopzkfc未启动 hadoop启动失败怎么办_Hive_10

总结

例如:以上就是今天要讲的内容,本文仅仅简单介绍了hive启动不成功原因,而Hive是一个基于Hadoop的数据仓库框架,它使用SQL语句读、写和管理大型分布式数据集。Hive可以将SQL语句转化为MapReduce (或Spark、 Tez) 任务执行,大大降低了Hadoop的使用门槛,减少了开发MapReduce程序的时间成本。