hive开启kerberos

原创

mob649e815adb02 2023-10-08 04:51:21 ©著作权

©著作权归作者所有：来自51CTO博客作者mob649e815adb02的原创作品，请联系作者获取转载授权，否则将追究法律责任

实现Hive开启Kerberos的流程

流程图

flowchart TD
    A[准备工作] --> B[安装Kerberos]
    B --> C[配置Kerberos]
    C --> D[配置Hadoop]
    D --> E[配置Hive]
    E --> F[测试Kerberos]

步骤详解

准备工作

在开始配置Hive开启Kerberos之前，需要完成以下准备工作：

安装Hadoop集群：Hive依赖于Hadoop，所以需要先安装好Hadoop集群并保证其正常运行。

安装Kerberos

在开始配置Kerberos之前，需要先安装好Kerberos软件包。可以按照以下步骤进行安装：

下载Kerberos软件包并解压缩。
进入解压缩后的目录，并执行以下命令安装Kerberos：

./configure
make
sudo make install

配置Kerberos

安装完Kerberos之后，需要进行配置以启用Kerberos认证。

创建Kerberos配置文件krb5.conf，并添加以下内容：

[libdefaults]
    default_realm = EXAMPLE.COM

[realms]
    EXAMPLE.COM = {
        kdc = kdc.example.com
        admin_server = kdc.example.com
    }

其中，EXAMPLE.COM为域名，kdc.example.com为Kerberos服务器地址。

创建Kerberos数据库，并添加管理员用户：

kdb5_util create -s
kadmin.local -q "addprinc admin/admin"

配置Hadoop

在开始配置Hive之前，需要对Hadoop进行配置以支持Kerberos认证。

编辑Hadoop配置文件core-site.xml，添加以下内容：

<property>
  <name>hadoop.security.authentication</name>
  <value>kerberos</value>
</property>

编辑Hadoop配置文件hdfs-site.xml，添加以下内容：

<property>
  <name>dfs.namenode.kerberos.principal</name>
  <value>hdfs/_HOST@EXAMPLE.COM</value>
</property>
<property>
  <name>dfs.datanode.kerberos.principal</name>
  <value>hdfs/_HOST@EXAMPLE.COM</value>
</property>

其中，_HOST会自动替换为实际的主机名。

重新启动Hadoop集群。

配置Hive

在完成Hadoop的配置后，可以开始对Hive进行配置以支持Kerberos认证。

编辑Hive配置文件hive-site.xml，添加以下内容：

<property>
  <name>hive.server2.authentication</name>
  <value>KERBEROS</value>
</property>
<property>
  <name>hive.server2.authentication.kerberos.keytab</name>
  <value>/path/to/hive.keytab</value>
</property>
<property>
  <name>hive.server2.authentication.kerberos.principal</name>
  <value>hive/_HOST@EXAMPLE.COM</value>
</property>

其中，_HOST会自动替换为实际的主机名，/path/to/hive.keytab为Hive的keytab文件路径。