1.大数据系统建设追求目标建设高效的数据模型和体系, 对这些数据进行有序和有结构地分类组织和存储,避免重复建设和数据不一致性,保证数据的规范性。 2.阿里巴巴OneDataOneData 是阿里巴巴内部进行数据整合及管理的方法体系和工具。在这一体系下,构建统一、规范、可共享的全域数据体系,避免数据的冗余和重复建设,规避数据烟囱和不一致性。 阿里巴巴集团大数据建设方法论
注意,数据迁移这玩意1.1.6以后才可以用哦。另外,说一下,英文是migrate,翻译为迁移,但是我看大部分是数据库的变更操作而已啊。 就跟源代码一样的,数据库结构在我们开发维护数据库驱动应用的同时,也在发展着。例如,在我们开发的时候,我们会想新创建一个数据库的表,或者是在开发完成,项目上线后,才发现要给某个字段加一个索引。很重要的一点,必须记录跟踪这些数据库结构方面的变化(迁移)。如果源代码或
翻译 精选 2012-11-18 19:29:13
412阅读
阿里巴巴数据库架构演进分析阿里巴巴架构的发展历程 (1999-2010)数据架构日益复杂,和一个简单的页面所拥有的数据分析大型互联应用的问题:解决方案UDSL热点缓存 阿里巴巴架构的发展历程 (1999-2010)数据架构日益复杂,和一个简单的页面所拥有的数据分析 如果你未来想当一个架构师:没事什么是加一层解决不了的!1.商品的基本信息 (名称、 价格、 商家信息) 关系型数据库就可以解决了!
数据库规范:字段允许适当冗余,以提高查询性能,但必须考虑数据一致。冗余字段应遵循:a)       不是频繁修改的字段。b)       不是varchar超长字段,更不能是text字段单表行数超过500万行或者单表容量超过2GB,才推荐进行分库分表。合适的字符存储长度,不但节约
转载 2023-07-17 17:37:39
144阅读
阿里云服务器中安装配置MYSQL数据库完整教程第一步: 确保服务器系统处于最新状态(这步操作可有可无) 第二步: 首先检查是否已经安装,如果已经安装先删除以前版本,以免安装不成功 [root@Panghl ~]# rpm -qa | grep mysql或者使用:[root@Panghl ~]# yum list installed | grep mysql&nbsp
转载 2023-07-30 14:20:51
80阅读
本文以我个人的理解简单分析下并行数据库的技术要点以及对未来并行数据库的发展做下展望,理解有偏差的地方欢迎各位指正。
原创 2021-07-13 16:46:37
303阅读
本文以我个人的理解简单分析下并行数据库的技术要点以及对未来并行数据库的发展做下展望,理解有偏差的地方,欢迎各位指正。并行数据库的定义在维基百科上,并行数据库被定义为通过并行使用多个CPU和磁盘来将诸如装载数据、建立索引、执行查询等操作并行化以提升性能的数据库系统。其中最重要的关键词是并行,分布式。并行数据库的技术要点并行数据库主要由执行引擎、存储引擎和管理功能模块组成,它们的不同技术风格形成了各个
原创 2021-03-16 21:38:55
677阅读
本文以我个人的理解简单分析下并行数据库的技术要点以及对未来并行数据库的发展做下展望,理解有偏差的地方,欢迎各位指正。并行数据库的定义在维基百科上,并行数据库被定义为通过并行使用多个CPU和磁盘来将诸如装载数据、建立索引、执行查询等操作并行化以提升性能的数据库系统。其中最重要的关键词是并行,分布式。并行数据库的技术要点并行数据库主要由执行引擎、存储引擎和管理功能模块组成,它们的不同技术风格形成了各个
原创 2021-03-16 21:39:00
561阅读
7 天猫双十一有个积分换墨盒的活动,总共有50万台天猫魔盒(box),每个用户(user)可以用99个天猫积分(point)兑换一台魔盒,且每人限换一台。 请设计一套java接口并实现下单(order)逻辑。 参考(但不局限于)下面的下单逻辑:  1、创建订单   2、扣减用户积分  3、扣减魔盒库存  4、下单成功&nbsp
1.建表规约【强制】表达是与否概念的字段,必须使用is_xxx的方式命名,数据类型是tinyint(1)( 1表示是,0表示否)。说明:任何字段如果为非负数,必须是无符号。正例:表达逻辑删除的字段名is_deleted,1 表示删除,0 表示未删除。【强制】表名、字段名必须使用小写字母或数字,禁止出现数字开头,禁止两个下划线中间只出现数字。数据库字段名的修改代价很大,因为无法进行预发布,所以字段名
转载 2024-04-16 18:23:39
72阅读
汇总20多款数据库的最新发布及年度回顾。
原创 2022-07-29 14:28:58
2401阅读
剖析阿里、京东、滴滴大数据架构变迁
转载 2021-12-16 10:15:19
161阅读
剖析阿里、京东、滴滴大数据架构变迁
转载 2022-06-06 16:39:07
267阅读
2018 年,双 11 迎来了十周年。十年间,依赖于迅速崛起的互联网技术以及各项新兴技术的沉淀,阿里巴巴缔造了全球数字经济时代的第一“操作系统”。在这个操作系统上,让全球消费者和商家买、卖、逛、听、看、游得顺心、放心、舒心。十年间,阿里巴巴的技术同学和全球开发者们,一起把互联网前沿技术转化为全球消费者、全球数字经济参与者可以感知的便利。如今,它已不仅仅是全球消费者的狂欢节,更是名副其实的全球互联网
原创 2020-11-18 22:14:20
320阅读
01大数据技术变迁概述‍‍大数据的概念从上世纪90年代被提出,03-06年Google的3篇经典论文(GFS、MapReduce、Bigtable)作为奠基,Hadoop等优秀系统的出现使之繁荣,经历了十余年的时间。从Gartner Hype Cycle这一行业技术发展的趋势图看,大数据从2011年进入该图谱,2014年被标记为进入衰退期,2015年开始不再标注,确实反映了这一概念经历了从不切实际
转载 2021-12-10 15:08:31
121阅读
01大数据技术变迁概述大数据的概念从上世纪90年代被提出,03-06年Google的3篇经典论文(GFS、MapReduce、Bigtable)作为奠基,Hadoop等优秀系统的出现使之繁荣,经历了十余年的时间。从Gartner Hype Cycle这一行业技术发展的趋势图看,大数据从2011年进入该图谱,2014年被标记为进入衰退期,2015年开始不再标注,确实反映了这一概念经历了从不切实际的幻
转载 2022-01-18 10:37:51
135阅读
阿里巴巴分布式数据库服务DRDS淘宝TDDL研发历史和背景淘宝DRDS/TDDL是阿里巴巴自主研发的分布式数据库服务。DRDS脱胎于阿里巴巴开源的Cobar分布式数据库引擎,吸收了Cobar核心的Cobar-Proxy源码,实现了一套独立的类似MySQL-Proxy协议的解析端,能够对传入的SQL进行解析和处理,对应用程序屏蔽各种复杂的底层DB拓扑结构,获得单机数据库一样的使用体验,同时借鉴了淘宝
转载 2023-12-21 07:22:36
72阅读
  该文来自张瑞:阿里集团数据库技术团队负责人在2018年双11来临之前的技术分享会,下面将其中的一些个人感悟记录下来。首先,科普一下有关阿里数据库的发展史。如果将阿里数据库发展历史分为三个阶段的话,分别是:第一阶段(2005-2009)商业数据库时代;第二阶段(2010-2015)开源数据库时代;第三阶段(2016年-至今)自研数据库时代。  商业数据库时代就是大家所熟知的I
什么是MPPMPP (Massively Parallel Processing),即大规模并行处理,在数据库非共享集群(传统的单节点不属于集群,双机热备或Oracle RAC等,均是基于共享存储的)中,每个节点都有独立的磁盘存储系统和内存系统,业务数据根据数据库模型和应用特点划分到各个节点上,每台数据节点通过专用网络或者商业通用网络互相连接,彼此协同计算,作为整体提供数据库服务。非共享数据库集群
转载 2023-08-30 19:00:40
2024阅读
# 数据库架构设计科普文章 数据库架构设计是在信息系统开发中至关重要的一部分。通过良好的数据库设计,不仅能提高数据的存取效率,还能确保数据的完整性和安全性。本文将详细探讨数据库架构设计的基本概念,并提供代码示例,帮助读者更好地理解这一主题。 ## 什么是数据库架构数据库架构是指数据库系统的结构设计,包括数据的组织、存储方法、数据之间的关系、数据访问方式等。一个好的数据库架构能够帮助
  • 1
  • 2
  • 3
  • 4
  • 5