在现代数据基础架构中，数据仓库码表不仅是数据标准化的重要组成部分，也对数据分析和业务决策产生着巨大的影响。通过正确管理和维护数据仓库中的码表，我们可以确保数据的一致性、准确性和可用性，这直接影响到公司报表的可靠性以及相关业务的决策效率。因此，本篇博文将系统化地记录我在处理数据仓库码表时遇到的一些问题及解决方案。
## 问题背景
在我们的数据仓库项目中，码表用于定义数据模型中的核心水平与维度信息。
一、OLTP和OLAP的区别OLAPOLTP全称On-line Analytical ProcessingOn-line Transaction Processing应用场景数据仓库数据库核心维度、度量、下钻、上卷、切片、切块、旋转ACID(原子性、一致性、孤立性、持续性)关注点事后的分析，从统计的角度去看待业务发生的节点关注完成这件事情，准确无误的执行二、传统数仓和互联网数仓的区别传统数仓互联网
转载
2023-11-13 15:04:56
101阅读
笔者是一个痴迷于挖掘数据中的价值的学习人，希望在平日的工作学习中，挖掘数据的价值，找寻数据的秘密，笔者认为，数据的价值不仅仅只体现在企业中，个人也可以体会到数据的魅力，用技术力量探索行为密码，让大数据助跑每一个。 1. 概述数据模型是数据管理的分析工具和交流的有力手段；同时，还能够很好地保证数据的一致性，是实现商务智能（Business Intelligence）的重要基础
转载
2024-01-02 21:39:35
32阅读
整理业务库的库表字段和字段含义的时候，遇到了码表的概念，码表是什么，和维度表又是什么关系呢？首先，码表没有明确的定义。百度搜索码表，可以看到和数据处理相关的解释是：码表是 编码表（或代码表）的简称。编码表：是一种代码说明表格。
用来帮助用户明确无解释数据和字符 代码的含义。例如：性别码表的值为男和女。类似于数据字典。以性别代码表为例：sexvalue1男2女我想获得一个性别为男的值只需要
转载
2024-01-09 17:25:28
501阅读
以下任何言论都完全是个人的理解，如有雷同纯属巧合，如有错误，希望大家多多指出，共同学习！谢谢！ 笔者是一个理解能力偏慢、稍钻牛角尖的程序员，什么东西都要从最基础理解起，一步一步向上理解，因此讲述时也是这样，讲述的也比较通俗，都是按照个人的理解来讲述的，也请大家少安毋躁。 在计算机中无论任何数据的传输、存储、持久化，都是以二进制的形式体现的。那么当我存一个字符的时候，计算机需要持
转载
2024-05-29 20:11:22
108阅读
编码表概述在计算机中无论任何数据的传输、存储、持久化，都是以二进制的形式体现的。那么当我存一个字符的时候，计算机需要持久化到硬盘，或者保存在内存中。
这个时候保存在内存、硬盘的数据显然也是二进制的。那么当我需要从硬盘、内存中取出这些字符，再显示的时候，为什么二进制会变成了字符呢？
这就是码表存在的意义。
码表其实就是一个字符和其对应的二进制相互映射的一张表。
这张表中规定了字符和二进制的映射关
转载
2024-09-19 18:24:47
83阅读
在这个信息爆炸式增长的时代，挖掘数据的潜在价值尤为重要，越来越多的人将目光聚集于商务智能BI领域。通过数据分析软件对来自不同的数据源进行统一的处理和管理，并以灵活的方式展示数据之间的联系，辅助企业进行决策。在BI越发重要的今天，如何学习BI应用并熟练掌握它呢？总结一下，大致需要从五个方向着手：1）学习数据库知识，掌握基础技能sql直白来讲，BI就是玩数据的，从数据中获取各种所需信息。因为BI的出发
转载
2024-08-26 07:44:15
55阅读
数据仓库什么是数据仓库数据仓库（Data Warehouse）是一个面向主题的、集成的、稳定的且随时间变化的数据集合，用于支持管理人员的决策基础知识事实表 事实表是指保存了大量业务数据的表，或者说保存了一些真实的行为数据的表。例如：销售商品所产生的订单数据。维度表 维度指的就是一个对象的属性或者特征，例如：时间维度，地理区域维度，年龄维度这是维度的概念。维度表里面存放的其实就是刚才所说的那些维度相
转载
2024-01-17 09:17:25
72阅读
1.背景 归纳整理数据仓库的基础知识，了解数据仓库的全貌和可深入学习的部分，本章节会主要梳理Hadoop&Hive&Spark的基础与部分面试题，末尾链接会梳理离线/实时数仓部分技术能力（持续更新，如果我坚持下去了的话，哈哈哈）。其中部分话术来源于网络，会在统一位置进行标注引用，感谢大家在网络上的分享！2.数据仓库知识整理2.1 文章引用&n
转载
2024-08-26 07:58:34
91阅读
在讨论组里看到很多同行，朋友和DW爱好者们讨论元数据，这里本人就元数据的理解和大家分享一下，如有偏差欢迎批评指正。元数据——“关于数据的数据”这个概念大家都知道了，但是如何理解这个关于数据的数据呢？从概念上我们可以看出，当我们说元数据时，必须有个参照，就是“关于的那个数据”，即这个概念里面有两个“数据”，我们不能孤立地说某个数据是元数据，只能说某个数据（Data A）是另外某个数据的元数据（Dat
转载
2023-12-19 20:29:59
64阅读
元数据管理系统这个名词,从事非数据仓库工作的人，很少会接触到这个系统，即使是正在从事这方面工作的朋友，可能仍然对它不是很了解，那么今天我来聊一聊元数据管理系统。元数据的定义按照传统的定义，元数据（Metadata）是关于数据的数据。在数据仓库系统中，元数据可以帮助数据仓库管理员和数据仓库的开发人员非常方便地找到他们所关心的数据；元数据是描述数据仓库内数据的结构和建立方法的数据，可将其按用途的不同分
转载
2023-11-10 12:24:44
44阅读
“中台”这个概念，是相对于前台和后台而生，是前台和后台的链接点，将业务共同的工具和技术予以沉淀。相对于业务中台来讲，数据中台跟企业的业务有较强的关联性，是企业业务和数据的沉淀，如果在烟囱林立的各财务业务系统之上搭建共享的数据中台，其不仅能降低重复建设和减少烟囱式协作的成本，也是企业差异化竞争优势所在。然而，当说到数据中台这里，很多人就有了疑问，以前没有数据中台这个概念时，企业不是也建设了数据仓库、
转载
2024-06-20 04:46:26
18阅读
讲数据仓库涉及到的基本概念。
转载
2021-07-26 11:19:43
1101阅读
ETL是什么？ ETL即数据抽取（Extract）、转换（Transform）、装载（Load）的过程,在数据仓库建置过程中，资料整合转换(ETL)是最花费时间、人力的，约占整个项目的60%-70%左右。一家企业除了在不同的成长阶段所留下来历史资料，还包括使用者所产生的大量资料，及对外部所取得的资料，这些信息可能来自不同的数据库平台，或一些特定的档案格式。而ETL就是要将各个不同的数据文件或数据库
转载
2023-10-11 10:38:44
284阅读
大数据篇：一文读懂@数据仓库1 网络词汇总结1.1 数据中台数据中台是聚合和治理跨域数据，将数据抽象封装成服务，提供给前台以业务价值的逻辑概念。数据中台是一套可持续“让企业的数据用起来”的机制，一种战略选择和组织形式，是依据企业特有的业务模式和组织架构，通过有形的产品和实施方法论支撑，构建一套持续不断把数据变成资产并服务于业务的机制。数据中台连接数据前台和后台，突破数据局限，为企业提供更灵活、高效
文章目录一、信息系统中的数据1、数据仓库的三层数据结构2、数据分类①、主数据-参考数据-交易数据②、状态数据-事件数据③、当前数据-周期数据3、元数据二、建立数据仓库1、建立数据仓库的方法2、数据组织方式三、多维数据模型1、相关概念2、数据存储方式(1)、基于关系表的存储(2)、基于多维数据库的存储3、子方体三、多维分析1、多维分析基本操作(1)、钻取(2)、切片/切块(3)、旋转2、OLAP的
转载
2023-08-02 17:48:37
57阅读
一、简介1.什么是数据仓库数据仓库（Data Warehouse）是一个面向主题的（Subject Oriented ）、集成的（Integrated）、相对稳定的（Non-Volatile）、反映历史变化（Time Variant）的数据集合，用于支持管理决策和信息的全局共享。 //请熟练记忆粗体字！二、特点1.数据仓库的特点1．数据仓库的数据是面向主题的 与传统数据库面向应用进行数据组
转载
2024-01-02 21:51:12
33阅读
先说结论： 数据仓库实行分而治之，面向BI（商业智能）； 数据中台实行一统天下，面向DateAPI（数据服务API）； 数据湖实行无为而治，面向AI（人工智能）。他们三个实行的策略不同，用途不同。但是数据中台可以包容数据仓库与数据湖，数据湖与数据仓库是并存的。接着我从为什么建立他（目的），建立他需要什么（成本），可以带来什么（收益）三方面来讨论。数据仓库目的 实现跨业务条线、跨系统的数据整合，为管
转载
2024-01-03 11:13:10
121阅读
1、数据存储的方式？ 数据仓库的数据由两种存储方式：一种是存储在关系数据库中，另一种是按多维的方式存储，也就是多维数组。2、存储何种数据？ 数据仓库中存在不同的综合级别的数据。一般把数据分成四个级别，早期细节级数据，当前细节级数据，轻度综合级，高度综合级。不同的综合级别一般称为粒
转载
2004-10-19 02:32:00
71阅读
数据仓库之事实表一、事实表分类1. 以粒度划分（1） 事务事实表（Transaction Grain Fact Table）（2） 周期快照事实表（Periodic Snapshot Grain Fact Table）（3） 累积快照事实表（Accumulating Snapshot Grain Fact Table）（4）三种事实表的区别2. 以用途划分（1）原子事实表（Atom Fact Ta
转载
2023-10-28 06:15:43
104阅读
