在hive上启动service hive --service hiveserver在eclipse中进行开发导入需要的jar包(我这个导入的是udf和jdbc连接hive需要的jar包,基本是最简的了)我的代码,hive的语法就不说了,大家可以修改例子中的sql来进行自己的业务。我的hive没有设置用户名,密码。所以  Connection con             
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2014-07-08 09:37:43
                            
                                3033阅读
                            
                                                        
                                点赞
                            
                                                                             
                 
                
                             
         
            
            
            
              hive是大数据技术簇中进行数据仓库应用的基础组件,是其它类似数据仓库应用的对比基准。基础的数据操作我们可以通过脚本方式以hive-client进行处理。若需要开发应用程序,则需要使用hive的jdbc驱动进行连接.代码连接hive需要先启动hive的metastore和hiveserver2hive --service metastore &            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2017-09-25 14:17:14
                            
                                3709阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            进行JDBC连接要如下几步:  1.导入jar驱动包  2.加载驱动包Class.forName("com.mysql.jdbc.Driver");3.创建连接  这里用的话可以直接复制过去,改一下数据库名就可以String url = "jdbc:mysql://127.0.0.1:3306/yb?useUnicode=true&characterEncoding=UTF-8";
Str            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-08-16 18:31:11
                            
                                146阅读
                            
                                                                             
                 
                
                             
         
            
            
            
                   hive是大数据技术簇中进行数据仓库应用的基础组件,是其它类似数据仓库应用的对比基准。基础的数据操作我们可以通过脚本方式以hive-client进行处理。若需要开发应用程序,则需要使用hive的jdbc驱动进行连接。本文以hive wiki上示例为基础,详细讲解了如何使用jdbc连接hive数据库。hive wiki原文地址            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2015-09-15 17:04:55
                            
                                1790阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            进入下面目录cd /root/soft/hive-1.2.1/bin[root@zjj101 bin]# hiveserver2运行完了就卡在这里了, 因为hiveserver2是一个前台进程            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-07-04 11:38:46
                            
                                109阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            package org.conan.myhadoop.mr;
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.ResultSet;
import java.sql.SQLException;
import java.sql.Statem            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2015-09-28 01:35:24
                            
                                9260阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            pom.xml<!-- https://mvnrepository.com/artifact/org.apache.hive/hive-jdbc --><dependency>    <groupId>org.apache.hive</groupId>    <artifactId>hive-jdbc</artifact...            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-05-17 11:34:50
                            
                                309阅读
                            
                                                                             
                 
                
                             
         
            
            
            
                   hive是大数据技术簇中进行数据仓库应用的基础组件,是其它类似数据仓库应用的对比基准。基础的数据操作我们可以通过脚本方式以hive-client进行处理。若需要开发应用程序,则需要使用hive的jdbc驱动进行连接。本文以hive wiki上示例为基础,详细讲解了如何使用jdbc连接hive数据库。hive wiki原文地址            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-12-16 18:52:22
                            
                                0阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            通常你希望org.hibernate.SessionFactory 来为你创建和缓存(pool)JDBC 连接。如果你采用这种方式,只需要如下例所示那样,打开一个 org.hibernate.Session:Session session = sessions.openSession(); // open a new Session一旦你需要进行数据访问时,就会从连接池(con            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-11-28 20:58:36
                            
                                57阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            一、为什么我们要用连接池技术? 前面的数据库连接的建立及关闭资源的方法有些缺陷。统舱传统数据库访问方式:一次数据库访问对应一个物理连接,每次操作数据库都要打开、关闭该物理连接, 系统性能严重受损。解决方案:数据库连接池(Connection Pool)。系统初始运行时,主动建立足够的连接,组成一个池.每次应用应用程序请求数据库连接时,无需重新打开连接,而是从池中取出已有的连接,使用完后,            
                
         
            
            
            
            文章目录前言一、JDBC是什么?二、使用步骤1.JDBC连接步骤1. 导入数据库对应的jar包2. 注册驱动3. 获取数据库连接对象4. 定义sql语句5. 获取执行sql的对象 Statement6. 执行sql7. 对结果进行处理8. 释放资源2.准备工作3.JDBC连接数据库步骤代码详解1.导入数据库对应的jar包,并Add As Library2.注册驱动1.编写数据库配置文件jdbc.            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-14 16:05:46
                            
                                122阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            JDBC连接数据库  •创建一个以JDBC连接数据库的程序,包含7个步骤: 1、加载JDBC驱动程序:  在连接数据库之前,首先要加载想要连接的数据库的驱动到JVM(Java虚拟机),  这通过java.lang.Class类的静态方法forName(String className)实现。  例如:  try{ 
 //加载MySql的驱动类 
 Class.forName(“com.mysql            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-10-17 09:54:34
                            
                                109阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            ## Spark Hive连接:实现大数据处理和查询的有效方式
在进行大数据处理和查询时,Spark和Hive是两个非常流行的工具。Spark是一个快速的通用计算引擎,而Hive是一个数据仓库工具,可以对大规模数据进行查询和分析。连接Spark和Hive可以实现更高效的数据处理和查询,本文将介绍如何在Spark中连接Hive,并提供一些示例代码。
### 为什么需要连接Spark和Hive?            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-05-06 06:35:00
                            
                                6阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            1、配置hadoop环境并且制定 VM  2、配置hive的依赖包<dependency>
      <groupId>org.apache.spark</groupId>
      <artifactId>spark-hive_2.11</artifactId>
      <version>2.3.            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-06-12 21:24:46
                            
                                141阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            文章目录1.理论2.配置1.理论Hive通过Metastore存储元数据元数据包含用Hive创建的datab            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-12-03 00:07:28
                            
                                470阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            目录Hive on Spark与SparkSQLSpark 内存配置spark动态分配Hive Hive on Spark与SparkSQLHive是Hadoop中的标准SQL引擎,也是最古老的引擎之一。Hive on Spark为我们立即提供了Hive和Spark的所有巨大优势。它最初是作为数据仓库(DW)工具构建的,现在它具有轻松交换执行引擎的功能,因此更具吸引力。简而言之,使用Hive o            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-13 16:57:21
                            
                                170阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            首相要安装好hive 1.首先修改配置文件文件为hive 路径下的 conf/hive-sit.xml 将内容增加 <property> <name>hive.server2.thrift.port</name> <value>10000</value> <description>Port numb            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2021-02-07 12:32:00
                            
                                790阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            Jdbc连接hive0.14版本号 眼下官网最新版本号是hive0.13,要想下载最新的hive得去git上去clone一个。 Hive0.14最大特点是支持直接插入。 如今做一个jdbc连接hive0.14的样例。 须要的jar包: 不要去引入单独的一个集成hive的jar由于那个包括了tomca            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2017-04-21 08:46:00
                            
                                185阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            一、zookeeper以及hive的安装1、首先下载安装包(我这的是zookeeper-3.4.5-cdh5.14.2.tar.gz和hive-1.1.0-cdh5.14.2.tar.gz安装包) 2、将其上传到linux系统下,并压缩文件(我放到/opt/文件夹下)tar -zxf zookeeper-3.4.5-cdh5.14.2.tar.gz
tar -zxf hive-1.1.0-cdh5            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-10-15 07:33:14
                            
                                597阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            在一般的java 项目  以及 现在特别火的大数据分析项目中 ,用到数据库以及数据库资源池 连接的事情 是在稀松平常不过的了 。今天就简单的梳理下 这是一个怎样的过程:我们按照代码的调度顺序审视下 :Comment ,我们是从Spark 数据分析做demo 展开的  :第一,假设读写数据库一定是从业务层面发出的 ,那么就应该有以下代码这是我们众多代码中的最后一步 ,写数据到数据            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-09-21 09:49:15
                            
                                91阅读