深入理解MySQL数据结构与算法 文章目录深入理解MySQL数据结构与算法1 数据结构2 存储引擎2.1) MyISAM2.2) Innodb3 索引分类3.1)聚簇索引3.2)非聚簇索引(二级索引)3.3) 联合索引(工作中常用)3.4) 覆盖索引(不是一种索引,是一种查询字段的方式) 1 数据结构二叉树(形成一条链表的形式)红黑树(树的高度太深)B树B+树B树和B+树的深度是由非叶子节点的所能
转载
2023-10-26 21:15:29
39阅读
接触过数据分析的小伙伴都应该听说过数据治理的名字。数据治理听起来似乎很抽象,很难理解。百科全书上的数据治理解释是组织中涉及数据使用的一整套管理行为。 似乎还是有点抽象。简单来说,数据治理是由企业数据治理部门发起实施的一系列政策和流程,关于如何制定和实施整个企业内部数据的业务应用和技术管理。其最终目的是挖掘数据价值,促进业务发展,实现盈利。 数据治理的对象包括数据、开发过程、管理
转载
2023-10-05 22:30:35
47阅读
从技术实施角度看,数据治理包含**“理”“采”“存”“管”“用”**这五个步骤,即业务和数据资源梳理、数据采集清洗、数据库设计和存储、数据管理、数据使用。数据资源梳理:数据治理的第一个步骤是从业务的视角厘清组织的数据资源环境和数据资源清单,包含组织机构、业务事项、信息系统,以及以数据库、网页、文件和 API 接口形式存在的数据项资源,本步骤的输出物为分门别类的数据资源清单。数据采集清洗:通过可视化
转载
2023-10-24 19:45:50
173阅读
# 入门MySQL技术栈指南
对于初学者来说,了解MySQL技术栈的构建和使用是迈向数据库世界的重要一步。本文将为你提供一个全面的指南,使你能顺利地实现自己的MySQL技术栈。
## 整体流程
首先,我们需要明确实现MySQL技术栈的整体流程。以下是具体步骤的表格展示:
| 步骤 | 任务 | 描述
基于Android平台的Web服务技术研究 Android 平台是Google 于2007 年11 月推出的一种智能手机平台,由操作系统、中间件、用户界面、应用软件组成,全面整合的移动"软件栈".诚然,提到Android 就不得不说开放手机联盟(Open Handset Alliance), 它是一个由33 家手机制造商、软件商和电信业组成的推广Android 的联合会。And
转载
2024-07-19 14:05:22
29阅读
iOS 客户端应用架构看似简单,但实际上要考虑的事情不少。本文作者将以系列文章的形式来回答 iOS 应用架构中的种种问题,本文是其中的第二篇,主要讲 View 层的组织和调用方案。下篇主要讨论做 View 层架构的设计的一些心法。本门心法重剑无锋,大巧不工。 ---- 《神雕侠侣》这是杨过在挑剑时,玄铁重剑旁边写的一段话。对此我深表认同。提到这段话的目的是想告诉大家,在具体做 View 层架构的设
搭建一套数据治理体系耗时耗力,但或许我们没有必要从头开始搞自己的数据血缘项目。本文分享如何用开源、现代的 DataOps、ETL、Dashboard、元数据、数据血缘管理系统构建大数据治理基础设施。
原创
2022-12-27 17:56:37
441阅读
终于有人将基于区块链的数据治理讲清楚了!
转载
2021-06-13 21:56:48
440阅读
周边很多同学在用python,但是偶尔会发现有人对python的基础语法还不是特别了解,所以帮大家梳理了python的基础语法(文中的介绍以python3为例)。如果你已然是python大牛,可以跳过这篇文章。编码python3的默认编码格式是:UTF-8 ,换句话说也就是:如果不在文件头部声明编码格式,python解释器默认以UTF-8的方式来读取python文件。作为对比,我们知道python
转载
2024-06-25 16:20:14
22阅读
终于有人将基于区块链的数据治理讲清楚了!
转载
2021-06-13 21:57:30
229阅读
一个多层的大数据平台技术栈概览
目录技术栈全貌1. 采集层和传输层SqoopFlumeCanalLogstashKafkaRocketMQ2. 存储层HBaseAlluxio/Redis/IgniteTiDBHDFSCephKudu3. 计算层HiveKylinDruid 为监控而生的数据库连接池。SparkSQLImpalaSparkStormFlin
转载
2024-05-14 16:53:24
153阅读
今天准备再谈下数据治理以及对数据治理框架的初步思考。实际上我在前面谈数据中台和主数据管理的时候多少谈到过数据治理和数据资产管理方面的内容,但是更多的都是从IT系统和功能层面来谈数据治理需求的最终实现。但是对于数据治理更多的首先是一个组织和管理问题,其次才是一个技术实现问题。其次在谈数据中台的时候谈到过数据资产管理,即数据治理本身就是对数据资产管理行使权力和控制的活动集合(规划,监督和执
转载
2024-01-14 11:32:10
135阅读
企业信息化建设是随着企业战略、业务形态、预算等多个方面不断迭代及变化的,所以在建设过程中难免出现阶段鸿沟,跨阶段整合难的现象,当企业以数据为中心的战略考量时,就需要通过数据治理方法对以往问题纠偏,对未来形态建设。本文通过理清数据治理与数据安全治理关系,寄希望帮助读者对两者有所清晰的认识。一、数据治理与数据安全治理关系数据治理简单来讲是通过对数据的梳理整合,利用数据驱动业务,实现企业增值。数据安全治
转载
2024-01-16 01:25:25
99阅读
1、什么是数据治理数据治理(Data Governance)是组织中涉及数据使用的一整套管理行为。由企业数据治理部门发起并推行,关于如何制定和实施针对整个企业内部数据的商业应用和技术管理的一系列政策和流程。数据的质量直接影响着数据的价值,并且直接影响着数据分析的结果以及我们以此做出的决策的质量。我们常说,用数据说话,用数据支撑决策管理,但低质量的数据、甚至存在错误的数据,必然会"说假话"!!!数据
转载
2023-08-11 14:56:01
171阅读
文章目录引言数据集成 - 实时日志数据治理 - 元模型数据治理 - 元数据采集数据治理 - 元数据管理结语 引言数睿通 2.0 目前基本完成了数据集成,数据开发,数据服务三大模块,初步具备了拉数,造数,供数的能力。因为平台相关人员都是兼职开发,并非全职,所以进度没有那么快,这点希望大家可以理解。3 月份主要是完善了一下数据集成,添加了实时日志的展示,同时开发了数据治理模块 — 元数据的相关功能,
转载
2023-11-02 13:46:06
139阅读
随着企业数据呈指数级增长,据统计国外GDPR 执法罚款增加了 40%。而国内如火如荼的数字化转型加速开展。数据价值和数据保护成为重要课题,因此数据治理是数据驱动型企业的一项紧迫战略举措。到 2026 年,数据治理市场预估价值 52.8 亿美元,高于 2020 年的 18.1 亿美元。 一 什么是数据治理框架 要解释数据治理框架,我们必须首先定义数据治理。 数据治理是指组织如何利用其人员、流程和技术
转载
2024-01-28 05:47:36
45阅读
目录1.什么是数据治理?2.为什么需要数据治理?3.DMBOK的数据治理框架4.数据治理框架的理解和解读4.1 数据治理的对象4.2 数据治理的时机4.3 谁来实施、谁来主导4.4 数据治理的内容5.数据治理框架总结1.什么是数据治理? 维基百科:数据治理对于确保数据的准确、适度分享和保护是至关重要的。有效的数据治理计划会通过改进决策、缩减
转载
2023-09-06 16:39:57
156阅读
最近在看《mysql技术内幕》一些笔记记录在这里。 1. Innodb 关键特性其实存储引擎优化思想就是想方设法地去解决cpu速度和磁盘速度不匹配的问题,以及怎么样防止数据库宕机导致的数据丢失。那么为了解决cpu和磁盘速度不匹配的问题,数据库设置了一个缓冲池:当要修改数据时,想磁盘中的数据拷贝到内存的缓冲池中,然后修改缓冲池中的数据,最后再在某一时刻刷回磁盘。为了防止刷回磁盘的过程中意外
转载
2024-10-05 07:42:26
45阅读
1.MySQL基本介绍 在javaEE开发中经常要用到数据库,常见的数据库有MySQL,Oracle,SqlServer等,其中MySQL有以下优点: a.MySQL是一个关系数据库管理系统。 b.MySQL是开源的。 c.MySQL服务器是一个快速的、可靠的和易于使用的数据库服务器。 d.MySQL服务器工作在客户/服
转载
2023-10-28 17:04:21
44阅读
Zepto.js day01(有手册) 一、回顾:移动端开发:①3种趋势 webApp、NativeApp、HybridApp ②Eclipse开发工具 新建Android的工程,通过webView组件,加载一个部署在服务器端的url或者file:///android_asset/index.html ③phoneGap是一个提供jsAPI的平台(框架),
转载
2024-08-04 10:20:15
85阅读