Greenplum 三节点安装教程（非root用户）
1. 环境准备
安装vmware，装三台centos虚拟机设置：
主机名 IP 内存 硬盘
node1 Xxx1 2G 80G
node2 Xxx2 2G 80G
node3 Xxx3 2G 80G1. CSDN下载greenplum安装文件: greenplum-db-4.3.8.2-build-1-RHEL5-x86_64
2. 安装
首先
转载
2024-08-25 16:29:18
178阅读
目录gp_toolkit 说明1、表膨胀相关查询2、表倾斜的相关信息3、锁查询相关的信息4、日志查询相关的信息5、资源队列相关查询信息6、查看磁盘上(database,schema,table,indexs,view)等的占用大小的相关信息7、用户使用的工作空间大小信息8、查看用户创建的信息(数据库,schema,表,索引,函数,视图)等信息9、系统中维护的ID信息10、系统查用的查询信息11、系
转载
2024-03-26 22:16:33
75阅读
首先我们先来了解一下什么是执行器。简单来讲，执行器是处理一个由执行计划节点组成的树，并返回查询结果。那么什么是执行计划节点呢？从本质上讲，一个执行计划节点，实际上就是一个数据处理节点。从下图可看到，在数据输入后，执行节点会对数据进行数据处理，然后返回数据作为输出。这些执行节点会被组织成树的形式。 下图是一个SELECT查询的执行计划树。通过优化器优化后，就会生成这样的树状结构，我们可以
转载
2024-06-02 17:01:14
92阅读
PostgreSQL提供了一些性能调优的功能。主要有如下几个方面。1.使用EXPLAINEXPLAIN命令可以查看执行计划，这个方法是我们最主要的调试工具。2.及时更新执行计划中使用的统计信息由于统计信息不是每次操作数据库都进行更新的，一般是在 VACUUM 、 ANALYZE 、 CREATE INDEX等DDL执行的时候会更新统计信息，因此执行计划所用的统计信息很有可能比较旧。 这样执行计划的
转载
2024-03-27 13:37:44
65阅读
性能学习成本兼容MySqlMySQL更加灵活 postgreSQLPostgreSQL 的社区支持是非常棒的，还有来自于独立厂商的商业支持。可靠性是PostgreSQL的最高优先级。它以坚如磐石的品质和良好的工程化而闻名，支持高事务、任务关键型应用PostgreSQL的文档非常精良，提
转载
2024-05-25 14:09:30
50阅读
一、数据存储方式关于数据库的数据存储方式一般分为行存储和列存储。行式数据库是按照行存储的，行存储就是各行放入连续的物理位置，就行我们平时写字一样，一行一行的写，读取的时候也是一行一行的读取。像SQL server,Oracle，mysql等传统的关系型数据库都属于行式数据库范畴。列式数据库是按照列存储的，列存储是把多行数据的每一列按照列存储在磁盘，就像一把数据写入excel表格中，每次按照列读取数
转载
2024-06-06 01:12:42
194阅读
一、简介Orca特性模块化可扩展性适应多核可验证性性能二、预备知识MPP（大规模并行处理）Share-nothing计算结构两个以上的协调处理器每个处理器有自己的内存，OS和硬盘Master负责数据库实例之间的工作协调，每部分数据处理和存储的工作称为Segements。当查询提交到master，查询会被优化并拆分为小的部分，并被分发为Segments。通过网络层互联，实现Segments之间的进程
转载
2024-04-30 21:28:41
43阅读
虽然GREENPLUM可以降低对优化的要求，但是它也是关系型
数据库。所以也需要进行优化。这里主要列出与GP优化的一些建议-PTA(PERFORMANCE TUNNING ADVICE)
PTA RULE No1
在完成大批量数据装载之后，针对目标表总是进行vacuum analyze操作。一方
转载
2024-02-27 17:49:38
68阅读
# Greenplum 查询语句详解
## 简介
Greenplum是一种基于PostgreSQL的开源分布式数据库系统，特别适用于大规模数据仓库和分析场景。Greenplum的查询语句是使用SQL编写的，具有强大的查询能力和灵活性。本文将详细介绍Greenplum查询语句的一些常用技巧和示例代码，帮助读者更好地理解和应用Greenplum数据库。
## 基本查询语句
在Greenplum
原创
2024-01-12 21:44:07
138阅读
关于GPDB的并发控制
与事务型数据库系统通过锁机制来控制并发访问的机制不同， GPDB(与PostgreSQL
一样)使用多版本控制(Multiversion Concurrency Control/MVCC)保证数据一致性。 这
意味着在查询数据库时，每个事务看到的只是数据的快照，其确保当前的事务不会
看到其他事务在相同记录上的修改。据此为数据库的每个事务提供事务隔离。
为什么会一直关注Greenplum的版本信息？项目数据库要从 MySQL 切换到 Greenplum 问题最多的就是 SQL 语法不同，MySQL有on duplicate key update实现冲突更新，Greenplum却没有。PostgreSQL 9.5 引入了 UPSET 功能，其语法insert on conflict do非常强大，支持合并写入（当违反某唯一约束时，冲突则更新，不冲突
一、 Pathman简介由于以前PostgreSQL社区版本的分区表功能比较弱，需要通过继承和初始化或RULE来实现分区表的功能，查询和更新涉及约束的检查，插入则涉及转换或规则重构，导致分区功能性能较弱差。Postgrespro公司开发了pg_pathman插件，适用于9.5及之后的版本，与传统方式不同的是，pg_pathman将分区的定义放置在一张元数据表中，表的信息会缓存在内存中，同时使用HO
转载
2024-03-16 09:17:37
161阅读
1 SQL查询性能优化检索的索引是否建立，凡是需要查找的字段尽量建立索引，甚至是联合索引；创建索引，包括表达式和部分索引； 2） 使用COPY语句代替多个Insert语句； 3） 将多个SQL语句组成一个事务以减少提交事务的开销； 4） 从一个索引中提取多条记录时使用CLUSTER； 5） 从一个查询结果中取出部分记录时使用LIMIT； 6） 使用
转载
2024-05-04 10:50:54
109阅读
1高可用方案1.1master高可用master镜像是通过把primary master对应的standby master放置到不同的物理主机实现的。正常情况下只有primary master接受用户连接请求，standby master通过gpsyncagent进程(运行在standby master上)利用事务日志保持与primary master的同步。由于master上不存放任何用户数据，
转载
2024-05-14 10:16:53
110阅读
在生产过程中，有的SQL查询往往会变得越来越慢，这时候，我们该怎么办呢？首当其冲的，我们可以通过查询计划来定位问题，今天就来谈谈如何在查询计划中定位这些慢查询产生的原因。1.查询计划中是否有操作耗时特别的长？当我们分析查询计划时，是否有一个异常操作消耗了大部分的查询时间？比如，在执行索引扫描时，时间比预期的要长很多，这时候我们基本可以判断此索引可能已经超期了，需要重建。2.查询计划预估的时间和真实
转载
2024-03-18 18:52:51
40阅读
1）pg_authid表：包含有关数据库认证标识符(角色)的信息。一个角色体现"用户"和"组"的概念。一个用户实际上只是一个设置了 rolcanlogin 标志的角色。任何角色(不管设置了 rolcanlogin)标志)都可以有其它角色做为成员；因为用户标识是集群范围的，pg_authid 在一个集群里所有的数据库之间是共享的：每个集群只有一个 pg_authid 拷贝，而不是每个数据库一个。字段
转载
2024-03-26 15:05:32
85阅读
在使用PostgreSQL数据库过程中，对SQL调优最常用的手段是使用explain查看执行计划，很多时候我们只关注了执行计划的结果而未深入了解执行计划是如何生成的。优化器作为数据库核心功能之一，也是数据库的“大脑”，理解优化器将有助于我们更好地优化SQL，下面将会为大家解开PostgreSQL优化器神秘的面纱。SQL执行过程在PG数据库中，对于DDL语句无需进行优化，到utility模块处理，对
Gpload安装手册（Linux版本）一、python 2.7版本Linux系统默认是安装python2.7的，如果没有需要手动安装（python版本要求2.4.4以上）；通过命令：python查看Python版本信息，如下图：二、PyYAML包安装2.1安装命令安装命令：pip install pyyaml2.2 检查安装输入：python输入：import yaml没有报错，则表示安装成功，如
日常SQL优化过程中，最好用的手段就是通过执行计划。在Greenplum和Deepgreen中，运行 EXPLAIN 后产生的执行计划呈树状，这棵树的每一个分叉，都代表了一个单独的数据库操作，例如：表扫描、表连接、聚合、排序。EXPLAIN 由于返回数据行数是从下向上传递的，所以我们在分析执行计划时，也应该自下而上。通常来说，最底下的是表扫描操作（索引、位图索引扫描）。如果
转载
2024-05-08 15:03:06
218阅读
GPDB中的文件空间与表空间GreenPlum是一个快速、灵活、纯软件的分析数据处理引擎，具有一些工具和特性可以充分利用任意个数硬件或者虚拟环境用来部署集群。这里讨论的一个特性是使用文件空间将数据加载和查询活动与底层的IO卷匹配。一旦在集群中创建了一个物理文件空间，它就会映射到一个逻辑表空间，然后创建表和索引时使用它。GP5的使用中可以参考下本文，GP6通过gpinitsystem工具创建文件空间
转载
2024-04-07 19:18:35
82阅读
