Exception in thread “main” java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver

在使用IDEA编写代码访问虚拟机上hive时，报错Exception in thread “main” java.lang.ClassNotFoundException: org.apache.hive.jdbc.HiveDriver。

我使用的hive是cdh版本的，版本为hive-1.1.0-cdh5.14.2，我的当前依赖和代码分别如下：

<repositories>
        <repository>
            <id>cloudera</id>
            <url>https://repository.cloudera.com/artifactory/cloudera-repos/</url>
        </repository>
    </repositories>
    <dependencies>
        <dependency>
            <groupId>org.apache.hive</groupId>
            <artifactId>hive-exec</artifactId>
            <version>1.1.0-cdh5.14.2</version>
        </dependency>
        <dependency>
            <groupId>org.apache.hive</groupId>
            <artifactId>hive-jdbc</artifactId>
            <version>1.1.0-cdh5.14.2</version>
        </dependency>
        <dependency>
            <groupId>org.apache.hive</groupId>
            <artifactId>hive-cli</artifactId>
            <version>1.1.0-cdh5.14.2</version>
        </dependency>
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-common</artifactId>
            <version>2.6.0-cdh5.14.2</version>
        </dependency>
    </dependencies>
    <build>
        <plugins>
            <plugin>
                <groupId>org.apache.maven.plugins</groupId>
                <artifactId>maven-compiler-plugin</artifactId>
                <version>3.0</version>
                <configuration>
                    <source>1.8</source>
                    <target>1.8</target>
                    <encoding>UTF-8</encoding>
                </configuration>
            </plugin>
        </plugins>
    </build>

代码如下：

package com.qlw.hive;

import java.sql.*;

public class HiveJDBC {
    private static String URL = "jdbc:hive2://更改为自己的ip:10000/myhive";

    public static void main(String[] args) throws Exception {
        Class.forName("org.apache.hive.jdbc.HiveDriver");
        //获取数据库连接
        Connection connection = DriverManager.getConnection(URL, "更改为自己的数据库用户", "更改为自己的数据库密码");
        //定义查询的sql语句
        String sql = "select s_name , s_score from score";
        try {
            PreparedStatement ps = connection.prepareStatement(sql);
            ResultSet rs = ps.executeQuery();
            while (rs.next()) {
                //获取id字段值
                int id = rs.getInt(1);
                //获取deptid字段
                String name = rs.getString(2);
                System.out.println(id + "\t" + name);
            }
        } catch (SQLException e) {
            e.printStackTrace();
        }
    }
}

解决办法（未成功）：


  • 由于在自己的依赖中使用的是maven中央仓库的地址，可能是由于下载不下来的原因，所以在IDEA中，点击 file ——> settings ——> Build,Execution,Deployment ——> Maven，查看右侧User settings file路径，去对应路径下找到settings.xml文件，在中添加阿里maven仓库下载地址

<mirror>
    <id>nexus-aliyun</id>
        <mirrorOf>central</mirrorOf>
        <name>阿里云公共仓库</name>
        <url>http://maven.aliyun.com/nexus/content/groups/public</url>
</mirror>

  • 然后在IDEA中pom.xml文件中将引用中央仓库的代码注释掉，同时鼠标右击 Maven ——> Reload project，从新加载，然后去下载对应的依赖

  • 代码点击运行后，接着再报错

Exception in thread “main” java.lang.NoClassDefFoundError: org/apache/hive/service/cli/thrift/TCLIService$Iface

Caused by: java.lang.ClassNotFoundException: org.apache.hive.service.cli.thrift.TCLIService$Iface

  • 后来查找解决方法是，需要引入hive-service服务

<dependency>
            <groupId>org.apache.hive</groupId>
            <artifactId>hive-service</artifactId>
            <version>1.1.0-cdh5.14.2</version>
        </dependency>

  • 再次报错

Exception in thread “main” java.lang.NoClassDefFoundError: org/apache/http/client/HttpClient
at org.apache.hive.jdbc.HiveDriver.connect

Caused by: java.lang.ClassNotFoundException: org.apache.http.client.HttpClient

  • 显然之前的方法是错误的，而且在下载过程中阿里maven仓库中也总报错无法解析cdh版本的依赖包，猜想是由于lib包不全的问题


最终解决方法：


  • 将虚拟机中hive安装包下的lib整个目录全部存到maven仓库中，并导入到IDEA依赖中，代码运行成功。
  • 导入依赖包操作：
  • IDEA中点击左上角 file ——> Project Structure ——> Libraries ——> 点击 左上角“ + ” 号——> Java 找到刚刚下载下来的路径，选择到 lib 目录点击OK即可

补充点：

  • 发现在引入lib目录后，如果依赖不导入，也可以代码运行成功，而且查询到虚拟机上的hive数据库，暂时不知道什么原因，[捂脸]