一、数仓基本概念1. 数据仓库概念英文名称为Data Warehouse，可简写为DW或DWH。数据仓库的目的是构建面向分析的集成化数据环境，为企业提供决策支持（Decision Support）。它出于分析性报告和决策支持目的而创建。数据仓库本身并不“生产”任何数据，同时自身也不需要“消费”任何的数据，数据来源于外部，并且开放给外部应用，这也是为什么叫“仓库”，而不叫“工厂”的原因1) 基本特征
转载
2023-11-25 17:32:25
141阅读
数据仓库（DW），将大量用于事务处理的传统数据库数据进行清理、抽取和转换，并按决策主题的需要进行重新组织。大量组织机构已经发现，在当今这个充满竞争和快速发展的世界，数据仓库是一个很有价值的工具。数据仓库系统构造方面的专家W.H.Inmon定义：“数据仓库是一个面向主题的、集成的、时变的、非易失的数据集合，支持管理部门的决策过程”。这个定义指出了数据仓库的主要特征：面向主题的、集成的、时变的、非易失
原创
2021-08-26 10:34:25
575阅读
数据仓库是一个用于存储和管理大量数据的系统，在数据分析和决策支持中扮演着重要角色。它将来自不同来源的数据整合在一起，以便于进行深度分析和挖掘。数据仓库通常具有高性能的查询能力，支持多维分析，能够帮助组织做出更准确的业务决策。
## 版本对比
在数据仓库技术的演变过程中，不同版本之间的特性差异明显。以下是一个简要的时间轴，列出了不同版本的发布和主要特性。
```mermaid
timeline
1.数据仓库的基本概念英文名称为Data Warehouse，可简写为DW或DWH。数据仓库的目的是构建面向分析的集成化数据环境，为企业提供决策支持（Decision Support）。它出于分析性报告和决策支持目的而创建。数据仓库本身并不“生产”任何数据，同时自身也不需要“消费”任何的数据，数据来源于外部，并且开放给外部应用，这也是为什么叫“仓库”，而不叫“工厂”的原因。2.数据仓库的主要特征数
转载
2023-09-30 09:45:38
250阅读
我相信，绝大多数人都听过数据仓库这个概念，也在用着数仓相关产品。本篇主要是整合数仓相关知识，结合自己的业务，对数仓做一个整体的介绍。 本篇主要从数仓基本概念，数仓分层，数仓模型，数仓应用，数仓体系等方面来阐述。一、关于数仓1、数据仓库 数据仓库（Data WareHouse），简称DW，是一个面向主题的，集成的，相对稳定的，反映历史变化的数据集合。 2、为什么需要数仓？ （1）数据体量越来越大 （
转载
2023-08-21 10:05:05
296阅读
常见的概念术语解析一、数仓中常见概念解析1、实体2、维度3、度量4、粒度5、口径6、指标7、标签8、自然键9、持久键10、代理键11、退化维度12、下钻13、上卷二、数仓概念之间关系1、实体表，事实表，维度表之间的关系2、指标与标签的区别3、维度和指标区别与联系4、自然键与代理键在数仓的使用区别 一、数仓中常见概念解析1、实体实体是指依附的主体，就是我们分析的一个对象，比如我们分析商品的销售情况
转载
2023-11-06 13:02:01
88阅读
数据仓库的一些概念前言由于工作原因，接触到了数据仓库，在平时工作交流的时候可能涉及到一些概念需要补课。因此这里准备补补课。啥是数据仓库数据仓库，英文名称为Data Warehouse，可简写为DW或DWH。数据仓库，是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它是单个数据存储，出于分析性报告和决策支持目的而创建。 为需要业务智能的企业，提供指导业务流程改进、监视时间、成本、质量
转载
2023-08-29 16:21:06
86阅读
数据仓库：数据仓库是一个支持管理决策的数据集合。数据是面向主题的、集成的、不易丢失的并且是时间变量。数据仓库是所有操作环境和外部数据源的快照集合。它并不需要非常精确，因为它必须在特定的时间基础上从操作环境中提取出来。 数据集市：数据仓库只限于单个主题的区域，例如顾客、部门、地点等。数据集市在从数据仓库获取数据时可以依赖于数据仓库，或者当它们从操作系统中获取数据时就不依赖于数据
转载
2024-08-28 20:25:34
72阅读
为什么要对数据仓库分层？用空间换时间，通过大量的预处理来提升应用系统的用户体验（效率），因此数据仓库会存在大量冗余的数据；如果不分层的话，如果源业务系统的业务规则发生变化将会影响整个数据清洗过程，工作量巨大通过数据分层管理可以简化数据清洗的过程，因为把原来一步的工作分到了多个步骤去完成，相当于把一个复杂的工作拆成了多个简单的工作，把一个大的黑盒变成了一个白盒，每一层的处理逻辑都相对简单和容易理解，
转载
2023-09-05 10:13:42
127阅读
1、数仓概念数据仓库，英文名称为Data Warehouse，可简写为DW或DWH。数据仓库，是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。它是单个数据存储，出于分析性报告和决策支持目的而创建。 为需要业务智能的企业，提供指导业务流程改进、监视时间、成本、质量以及控制。2、数仓为何要分层合理的数据仓库分层一方面能够降低耦合性，提高重用性，可读性可维护性，另一方面也能提高运算的效率
转载
2023-09-29 10:05:51
244阅读
以下是个人对于oracle Actiive DataGuard和 GoldenGate的一些理解，限于使用场景和经验的不同，可能不会非常的全面，如有其它不同的想法，欢迎讨论调整补充。 首先从容灾方向来看，个人认为ADG产品更加倾向于结构和数据层面的容灾，是为了保证整个数据库（实例）系统的完整性而设计的，主要目的是为了高可用性（HA）；可以说，dataguard是一套数据库
转载
2024-07-17 12:08:18
82阅读
1. 模式及模式对象1.1.
模式用户的模式(SCHEMA）指的是用户账号拥有的对象集，在概念上可将其看作是包含表、视图、索引和权限定义等的对象。如下图：如上面三图，DM模式主要包含以下的模式对象：1.表；2.索引；3.视图；4.存储过程/函数；5.序列；6.触发器；7.包；8.类；9.同义
原创
2022-03-13 21:25:50
1199阅读
先po一张用SQL Server建的表：名词的解释：数据：描述事物的符号叫做数据，数据是数据库中存储的基本对象。（也就是文字、图像、音频都可以叫做数据，比如：）数据库：长期储存在计算机内，有组织的，可共享的大量的数据的集合。（不就是存放数据的仓库?，这个仓库在计算机上鹅已）数据库管理系统：是位于用户与操作系统之间的一层数据管理软件。（也就是有这么一个系统软件用来高效地获取和维护数据）数据库系统：是
转载
2023-09-18 10:08:25
326阅读
基本数据库名词解释数据(Data)数据库(DataBase,DB)数据库是长期存储在计算机内、有组织的、可共享的大量数据的集合。数据库中的数据按照一定的数据模型组织、描述和存储，具有较小的冗余度，较高的数据独立性和易扩展性，并可为各种用户共享。数据库管理系统(DataBase Management System,DBMS)数据库管理系统是位于用户和操作系统之间的一层数据管理软件。它可以科学的组织和
转载
2024-06-19 19:46:12
19阅读
数据库这玩意可能大家天天都在用，可是问你几个关于数据库的概念，很多人都是支支吾吾，如果你也觉得可能会这样，那最好看看下面的一些基础概念。 数据 狭义的理解,数据就是数值,即0、1、2、3、4、5、6、7、8、9和符号、小数点组成的数值,广义地讲,计算机所能处理的数据是指计算机能接受、存储、处理的任何信息,除了数值外,还有字符数据、图形数据、音频数据、视频数据、控制信号数据等等...
转载
2007-06-21 23:18:00
250阅读
2评论
聚集索引、辅助索引简要解析B+树简要介绍聚集索引辅助索引 B+树简要介绍B+树是B树的一种变形，是为磁盘或其他直接存取辅助设备设计的一种平衡查找树。其叶子结点用于存放所有的数据，叶子结点以上各层作为索引使用。所有的数据按照键值的大小顺序存放在同一层的叶子节点上，用各叶子节点的指针进行连接。B+树的插入使用了拆分页(split)、旋转(Rotation)等操作，在尽量减少磁盘操作的前提下保持B+树
游标概念：游标提供了一种对从表中检索出的数据进行操作的灵活手段，就本质而言，游标实际上是一种能从包括多条数据记录的结果集中每次提取一条记录的机制。游标总是与一条SQL选择语句相关联因为游标由结果集（可以是零条、一条或由相关的选择语句检索出的多条记录）和结果集中指向特定记录的游标位置组成。当决定对结果集进行处理时，必须声明一个指向该结果集的游标。个人理解：游标：根据用户的需要筛选出一些数据存入的一
转载
2024-08-12 20:24:05
20阅读
# 数据仓库 名词解释
## 简介
数据仓库是一个用于集成、管理和分析组织内部和外部数据的存储系统。它可以将来自不同数据源的数据整合在一起，为决策支持和商业智能提供数据基础。
## 数据仓库实现流程
下面是实现数据仓库的一般流程，我们将逐步介绍每一步需要做的事情及相应的代码。
| 步骤 | 描述 |
|------|------|
| 1. 数据收集 | 收集源数据并进行清洗和预处理 |
原创
2023-07-08 08:15:25
108阅读
一、大数据的定义 大数据普通的分析维度：1、数据量（大容量）：数据量大2、数据的速度（高效性）：数据的实时性3、数据的多样性（多类型）：数据的类型多种多样，有以关系型数据库中的数据为代表的结构化数据和以日志型数据为代表的非结构化数据，同时也有音频和视频等为代表的多媒体非结构化数据。4、低价值密度（低密度）：数据量大，但是价值米读比较低，需要从海量的数据中精确的定位到某个人或者事物在这一小段时间范围
转载
2024-06-24 15:09:27
78阅读
常见大数据技术名词解释文章目录1）Sqoop2）Flume3）Kafka4）Storm5）Spark6）Oozie7）Hbase8）Hive9）R语言10）Mahout11）ZooKeeper1）
原创
2021-08-20 17:07:19
310阅读
