1.概述   上一章《那些年使用Hive踩过坑》介绍了Hive基本架构及原理,加下来介绍Hive基本操作和一些注意事项。2.基本操作 2.1Create Table2.1.1介绍 CREATE TABLE 创建一个指定名字表。如果相同名字表已经存在,则抛出异常;用户可以用 IF NOT EXIST 选项来忽略这个异常。 EXTERNAL 关键字可以让用户创建一个外部表,在建表同时指
转载 2023-09-08 14:46:40
32阅读
hive学习书本 当今软件专业人员承受着不断变化语言和工具调色板来保持高技能水平不断压力,并且担心可能变得无关紧要恐惧令人生畏。 那些跟不上行业趋势和发展趋势的人可能会失去适销对路风险,但是即使那些紧追技术新闻的人也需要选择要追求技能(在时间允许情况下),忽略技能以及采用何种方法在追求中使用。 学习新事物第一个直觉自然是在网上找到一些好资源,也许还可以买几本书。 除了
转载 2023-12-18 23:29:43
56阅读
1. MapReduce任务, Map之后,会进行排序,然后才会传入Reduce作业。  MapReduce本质是结果集从1个集合到另外一个集合归并过滤过程。 2. HBase场景是所要查询列只是一个列子集时候,查询速度会很快。 提供行级别的更新和快速查询。(亿级别的数据查询)   3
转载 2023-10-13 21:40:08
69阅读
Hive是什么Hive不是什么入门数据单元类型系统基本类型复杂类型 Hive是什么Hive是基于Apache Hadoop数据仓库。Hadoop提供了在商用硬件上存储和处理大量数据能力,并且具有容错机制。Hive能够让大数据汇总,即时查询和分析变得更加简单。Hive提供了SQL,用户可以很方便地进行即时查询,数据汇总和分析。同时,HiveSQL给用户提供了很多空间去集成定制分析功能,如
转载 2023-12-16 10:34:09
35阅读
# 如何实现“Hive SQL ” 作为一名刚入行小白,学习如何实现“Hive SQL ”可以说是一个有趣挑战。以下是实现这一目标的流程和步骤,我们将通过表格和代码示例来引导你完成这个过程。 ## 实现流程 ```markdown | 步骤 | 描述 | |------|-------------------------------
原创 11月前
27阅读
关于hive以下内容为边读边总结,用于后期快速学习17.6 表hive表在逻辑上由存储数据和描述表中数据形式相关元数据组成。数据一般存放在hdfs中,也可存放其他hadoop文件系统。元数据存放在关系数据库中。17.6.1 托管表和外部表hive创建表时,默认hive自己管理,并将数据移入hive数据仓库目录,这样表称为内部表。另一种数据不存放在hive数据仓库目录,这样叫外部表。
Hive 简介什么是Hive1、Hive 由 Facebook 实现并开源2、是基于 Hadoop 一个数据仓库工具3、可以将结构化数据映射为一张数据库表4、并提供 HQL(Hive SQL)查询功能5、底层数据是存储在 HDFS 上6、Hive本质是将 SQL 语句转换为 MapReduce 任务运行7、使不熟悉 MapReduce 用户很方便地利用 HQL 处理和计算 HDFS 上
转载 2023-11-23 15:28:25
100阅读
1.Hive基本概念1.1前言在学习Hive原理之前,你必须对Hadoop有一定了解并且使用过HQL,否则建议先学习Hadoop。1.2什么是HiveHive是由Facebook开源用于解决海量结构化日志数据统计工具。Hive是一个基于Hadoop数据仓库工具,可以将结构化数据映射为一张表,并提供类似于Mysql中SQL功能。其本质是将HQL转化为一个MapReduce任务,然后在Ha
转载 2024-06-07 15:35:12
68阅读
Excel读写引用库替换为Easy POI 原因: Easy POI更简单(具体可对比下方代码跟2.5中Excel读取代码)用例Excel分层设计: excel封装成对象 1) 导入easypoi坐标 2) 加载excel流对象 3) 导入参数对象ImportParams 4) 工具ExcelImportUtil解析excel封装成List
前言通过访问hbase官方网站,得知,hbase是一个分布式,开源非关系型数据库,其他我就不介绍了,主要介绍一下安装这个需要环境,首先hadoop集群必须安装好,然后zookeeper集群也得安装好,如果您zookeeper集群没有安装,请仿照我之前写文章来搭建一下。 栋公子:搭建zookeeper集群zhuanlan.zhihu.com 下载首先安装
知识推荐书籍1、舍恩伯格《大数据时代》;2、巴拉巴西《爆发》;3、涂子沛《大数据》;4、吴军《智能时代》;5、《大数据架构商业之路:从业务需求到技术方案》
转载 2023-09-14 16:31:50
71阅读
什么是数据结构 什么是数据?数据:是描述客观事物符号,是计算机中可以操作对象,是能被计算机识别,并输入给计算机处理符号集合。就是图书馆中所有的数据对象:是性质相同数据元素集合,是数据子集。其实就是某一类数据元素:是组成数据、有一定意义基本单位,在计算机中通常作为整体处理。也被称为记录。就是。数据项:一个数据元素可以由若干个数据项组成。其实就是书名、作者、出版社啥….什么是结
转载 2023-07-17 19:28:23
189阅读
这个,写一篇关于学习网络应该读的书,也不是应该读,你TM聪明就不读 这些可以让大家少走弯路,少看一些国内那些SB写,省钱,省时间,完全没排版,凑合看 好少废话。LIST 第一部分 基础类 计算机网络(第四版) Andrew S.Tanenbaum   对对,中文翻译成“谭邦宁”就是写MINIX那个老头,MIT毕业,后来娶了荷兰老婆,然后去了荷兰教书,就是
原创 2009-04-23 21:01:08
787阅读
1评论
概述Redis是一个开源,基于内存结构化数据存储媒介,可以作为数据库、缓存服务或消息服务使用。 Redis支持多种数据结构,包括字符串、哈希表、链表、集合、有序集合、位图、Hyperloglogs等。 Redis具备LRU淘汰、事务实现、以及不同级别的硬盘持久化等能力,并且支持副本集和通过Redis Sentinel实现高可用方案,同时还支持通过Redis Cluster实现数据自动分片
转载 2023-07-07 11:06:17
108阅读
提高DevOps工程师软技能,可以了解一下笔者前一篇文章《DevOps工程师必备软技能》《凤凰项目》是DevOps界神,虽然内容表现形式是小说,但是依然是敏捷开发及DevOps领域必读书籍。很多知名咨询师都是通过此书开启了DevOps及敏捷之旅,中故事均来源于运维日常工作,正是体现了艺术源于生活、高于生活本质。笔者间隔两年时间,阅读此书两次,希望可以讲书中了解到一些经验分享给大家。小
转载 2024-01-12 22:36:35
51阅读
2008年10月中国电信和中国联通之间正式交割CDMA 1X网络,建立在CDMA 1X通信网络上基于BREW移动增值业务也陆续由中国电信开始运营;2009年1月,在经历了多年等待后,中国3G牌照正式发放。在CDMA 2000,WCDMA有多年运营经验BREW也将面临更大机遇…… 本书主要针对是移动软件开发人员,移动增值业务运营人员和企业(运营商,手机厂商,C
原创 2009-05-05 08:43:34
273阅读
在当今软件开发行业中,DevOps已经成为越来越受欢迎一种开发模式。DevOps本质是通过打破开发团队和运维团队之间壁垒,促进二者更紧密地合作,以加速软件交付和提高软件质量。而对于想要深入了解DevOps理念和实践的人来说,书籍是最好学习途径之一。 近年来,围绕DevOps主题出版了很多优秀书籍,其中不乏经典之作。其中一本备受推崇著作就是《红帽DevOps实践指南》。这本书由红帽公
原创 2024-03-11 12:24:18
100阅读
2008年10月中国电信和中国联通之间正式交割CDMA 1X网络,建立在CDMA 1X通信网络上基于BREW移动增值业务也陆续由中国电信开始运营;2009年1月,在经历了多年等待后,中国3G牌照正式发放。在CDMA 2000,WCDMA有多年运营经验BREW也将面临更大机遇…… 本书主要针对是移动软件开发人员,移动增值业务运营人员和企业(运营商,
原创 2021-11-22 14:54:28
27阅读
一、你知道IOC与DI吗?1、IOC(Inversion of Control )——控制反转即依赖对象不在被依赖模块类中直接通过new来获取先看看下面这段代码问题~public class SqlServerDal { public void Delete() { Console.WriteLine("删除表中某个订单信息!"); } } public clas
Python Cookbook(第3版)中文版.pdf Python高手之路 大话数据结构.pdf mysql必知
原创 2022-05-31 12:28:52
81阅读
  • 1
  • 2
  • 3
  • 4
  • 5