Hive 查看历史 SQL 执行记录
步骤概述
下面是查看 Hive 历史 SQL 执行记录的流程：
| 步骤 | 描述 |
|---|---|
| 1. | 配置 Hive 元数据库 |
| 2. | 启用 Hive 历史记录功能 |
| 3. | 查看历史 SQL 执行记录 |
接下来，我将一步一步指导你如何完成这些步骤。
配置 Hive 元数据库
在开始查看 Hive 历史 SQL 执行记录之前，我们需要配置 Hive 元数据库。元数据库用于存储 Hive 的元信息，包括表结构、分区信息和 SQL 执行记录等。
- 打开 Hive 配置文件
hive-site.xml。 - 添加以下配置项：
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:derby:;databaseName=/path/to/metastore_db;create=true</value>
<description>JDBC connect string for a JDBC metastore.</description>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>org.apache.derby.jdbc.EmbeddedDriver</value>
<description>Driver class name for a JDBC metastore.</description>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>hive</value>
<description>Username to use against metastore database</description>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>hive</value>
<description>Password to use against metastore database</description>
</property>
这里需要替换 <value> 标签中的 /path/to/metastore_db 为你希望存储元数据的路径。
启用 Hive 历史记录功能
启用 Hive 历史记录功能可以让 Hive 记录每次 SQL 执行的详细信息，包括执行时间、执行状态、执行结果等。
- 打开 Hive 配置文件
hive-site.xml。 - 添加以下配置项：
<property>
<name>hive.querylog.enabled</name>
<value>true</value>
<description>Enable query logging</description>
</property>
<property>
<name>hive.querylog.location</name>
<value>/path/to/querylog</value>
<description>Location of Hive query logs</description>
</property>
这里需要替换 <value> 标签中的 /path/to/querylog 为你希望存储查询日志的路径。
查看历史 SQL 执行记录
现在我们已经完成了配置工作，可以开始查看历史 SQL 执行记录了。
- 打开 Hive 命令行界面或使用 Hive 客户端工具（如 Beeline）登录到 Hive。
- 执行以下命令来查看历史 SQL 执行记录：
SELECT * FROM hive_querylog;
这条 SQL 查询语句会返回所有的历史 SQL 执行记录，包括执行时间、SQL 语句、执行状态和执行结果等。
总结
通过配置 Hive 元数据库和启用历史记录功能，并使用 SQL 查询语句 SELECT * FROM hive_querylog;，我们可以方便地查看 Hive 的历史 SQL 执行记录。这对于开发者来说是一个很有用的功能，可以帮助我们了解 SQL 执行的情况、排查问题和优化查询性能。
希望这篇文章对你有帮助，如果有任何问题，请随时向我提问。
