目录0. 相关文章链接1. 安装包准备和上传2. FE部署3. BE部署3.1. 示例一：3.2. 示例二：3.3. 其他事项3.4. 启动BE3.5. 查看BE状态3.6. 配置命令4. 启动和查看Doris5. 使用Doris5.1. 登录并加载BE5.2. 建库建表并查询5.3. 通过navicat远程工具访问5.4. 通过web页面访问6. Doris一键启动停止脚本0. 相关文章链接数据
转载
2024-06-12 20:00:23
73阅读
对于SQL开发人员来说，必须先要了解进行SQL编程的对象类型，即要开发的数据库应用是哪种类型。一般来说，可将数据库的应用类型分为OLTP(OnLine Transaction Processing ，联机事务处理)和OLAP(OnLine Analysis Processing，联机分析处理)两种。OLTP是传统关系型数据库的主要应用，其主要面向基本的、日
OLTP：On_line Transaction Processing 联机事务处理
OLAP：On_line Analytical Processing 联机分析处理
OLTP 顾名思义，以业务处理为主。OLAP则是专门为支持复杂的分析操作而设计的，侧重于对决策人员和高层管理人员的决策支持，可以应分析人员的要求快速、灵活地进行大数据量的复杂查询处理，并以一直
转载
2023-09-18 08:37:05
69阅读
本篇来聊聊OLAP与OLTP的区别以及它们各自的适用场景，以此话题为导引和大家聊聊技术视野与知识储备对于研发同学的重要性，最后站在事务处理与在线分析的角度分别论述下两个数据世界的底层构建逻辑。OLAP、OLTP的概念与区别概念了解OLAP、OLTP的概念，识别各自适用场景，发挥各自的功能优势
场景特点OLTP偏向数据存储数据事务性（ACID）、实时性OLAP偏向数据分析数据计算、聚合、转
转载
2024-01-11 19:41:23
183阅读
一、联机事务处理系统（OLTP系统）也称为生产系统，它是事件驱动、面向需求的，比如银行的储蓄系统就是一个典型的OLTP系统。OLTP在使用过程中积累了大量的数据。
关系数据库概念提出之后，联机事务处理一直是数据库应用的主流。
OLTP的特点是：
1）对相应时间要求非常高；
2）用户数量非常庞大，主要是操作人员；
3）数据库的各种操作基于索引进行，每次操作数据量很小。二、联机分析处理系统（OLAP
转载
2023-07-07 09:04:34
134阅读
MPP，全称为Massively Parallel Processor，翻译过来就是大规模并行处理。MPP系统是由许多松耦合的处理单元组成的（要注意的是这里指的是处理单元而不是处理器）。每个处理单元内的CPU都有自己私有的资源，如总线，内存，硬盘等，且都有操作系统和管理数据库的实例复本。这种结构最大的特点在于不共享资源(share-nothing)。 MPP架构特点Share Noth
转载
2023-08-15 11:38:35
296阅读
文章目录MPP是什么SMP- Symmetric Multi-Processor 对称多处理器结构NUMA -Non-Uniform Memory Access 非一致存储访问结构MPP -Massive-Parallel Processing 海量并行处理架构MPP DB- Share Disk- Share Nothing典型MPP DBGreenplumTeradataImpalaPrest
转载
2019-09-02 14:15:00
145阅读
MPP架构、常见OLAP引擎分析一、MPP架构1、SMP2、NUMA3、MPP二、批处理架构和MPP架构三、 MPP架构的OLAP引擎1）只负责计算，不负责存储的引擎1、Impala2、Presto2）既负责计算，又负责存储的引擎1、ClickHouse2、Doris3、Druid4、TiDB5、Greenplum3）常用的引擎对比一、MPP架构MPP是系统架构角度的一种服务器分类方法。目前商用的
转载
2023-09-19 10:18:10
333阅读
阅读mheap代码原因主要是在vpp使用中遇到了一个bug，主要对mheap底层结构不太了解，用将近一周的时间定位了此问题（mhash代码存在bug）。问题原因在vpp-1844单子里面也比较详细。 1、系统malloc和mmap对比malloc使用brk分配的内存，需要等到高地址内存释放以后才能释放，存在内存“空洞”，申请大内存（大于128k）时候使用的是mmap系统调用； mmap系
文章目录一、MPP架构二、批处理架构和MPP架构三、 MPP架构的OLAP引擎 本文分为三部分讲解，第一部分详解MPP架构，第二部分剖析MPP架构与批处理架构的异同点，第三部分是采用MPP架构的OLAP引擎介绍。一、MPP架构MPP是系统架构角度的一种服务器分类方法。目前商用的服务器分类大体有三种：SMP 对称多处理器结构NUMA 非一致存储访问结构MPP 大规模并行处理结构我们今天的主角是 M
转载
2023-08-27 21:14:28
257阅读
从系统架构来看，目前的商用服务器大体可以分为三类，即对称多处理器结构 (SMP ： Symmetric Multi-Processor) ，非一致存储访问结构 (NUMA ： Non-Uniform Memory Access) ，以及海量并行处理结构 (MPP ： Massive Parallel
转载
2016-03-14 09:35:00
62阅读
2评论
# 实现 OLTP（在线事务处理）技术架构的指南
在线事务处理（OLTP）是支持事务数据的系统，广泛应用于银行、电商和各种业务管理系统中。对于刚入行的开发者来说，实现一个 OLTP 技术架构可能会显得有些复杂，但只要遵循以下步骤，就能顺利创建一个功能齐全的 OLTP 系统。
## 整体流程
下面是实现 OLTP 技术架构的步骤概览：
| 步骤 | 描述 |
|------|------|
原创
2024-10-07 04:27:04
95阅读
一、Greenplum背景时间回到2002年，互联网行业经过近10年的发展，数据量正处于快速增长期：CPU计算和IO吞吐上不能满足海量数据的计算需求；模式遇到了瓶颈。 3、分布式存储和分布式计算理论刚刚被提出来，Google的两篇著名论文关于GFS分布式文件系统和关于MapReduce 并行计算框架的理论引起业界的关注，分布式计算模式在互联网行业特别是收索引擎和分词检索等方面获得了巨大
转载
2023-08-31 11:26:47
192阅读
为了全面的了解NUMA的优势，我们不妨先来考察一下这集中模式在处理器与存储器结构方面的区别。 SMP模式将多个处理器与一个集中的存储器相连。在SMP模式下，所有处理器都可以访问同一个系统物理存储器，这就意味着SMP系统只运行操作系统的一个拷贝。因此SMP系统有时也被称为一致存储器访问（UMA）结构体系，一致性意指无论在什么时候，处理器只能为内存的每个数据保持或共享唯一一个数值。很显
转载
2023-09-29 09:33:59
88阅读
1. Hadoop是分布式计算平台，以hive应用为例，它的存储结构是HDFS，计算框架是MapReduce；MPP代表大规模并行处理，一个优点是可扩展性，数据在节点（分片）之间分割，每个节点只处理其本地数据。2. hive跟mpp的存储模型不一样，hive用的hdfs，而mpp需要自己做切分，自己做切分就带来动态调整的问题，hdfs的扩展是通过元数据来做的，他有中心节点用来存元数据，在加
转载
2023-09-05 14:14:57
173阅读
数据库构架设计中主要有Shared Everthting、Shared Nothing、和Shared Disk：
原创
2022-01-12 09:43:03
387阅读
目录apache的三种MPM模式a、prefork优点缺点b、worker优点缺点c、eventApache和PHP三种结合方法a、模块化模式：b、CGI模式[CGI：Common Gateway Interface]c、fastCGI模式解析漏洞 apache的三种MPM模式a、prefork为了减少频繁创建和销毁进程的开销，apache在启动之初，就预先fork一些子进程，然后等待请求进来。
转载
2024-08-20 20:05:52
26阅读
1，去中心化在一个分布式系统中，每个节点都具有高度自治的特征，节点之间彼此可以自由连接，形成新的连接单元。任何一个节点都可能成为阶段性的中心，但不具备强制性的中心控制功能。节点与节点之间的影响，会通过网络而形成非线性英国关系，这种开放式、扁平化、平等性的系统现象或结构，我们称之为去中心化。2，MPP架构（Massive Parallel Processing ，大规模并行计算）首先需要介绍一下SM
转载
2023-08-31 11:26:51
147阅读
这两天要捣腾一个由SMP以及MPP构成的计算机群，于是对SMP以及MPP google了一下，总结如下： SMP的全称是"对称多处理"（Symmetrical Multi-Processing）技术，是指在一个计算机上汇集了一组处理器(多CPU),各CPU之间共享内存子系统以及总线结构。它是相对非对称多处理技术而言的、应用十
转载
2023-07-31 23:01:27
109阅读
什么是MPPMassively Parallel Processing, 即大规模并行处理一般用来指多个SQL数据库节点搭建的数据仓库系统。执行查询的时候，查询可以分散到多个SQL数据库节点上执行，然后汇总返回给用户MPP的核心减少资源的共享，尽力达到Shared Nothing。 MPP并不会进行远程计算，每个节点都有自己独立的CPU，内存和磁盘资源并行，MPP并没有像并行度这样的概念，而是每个
转载
2023-06-01 09:36:13
106阅读
