鉴于OLAP系统的特性，应该谨慎并保守地使用索引。避免在频繁更新的列上使用索引；在高选择性的列上使用B-tree索引；在低选择性的列上使用Bitmap索引。
通常来说在传统数据库中使用索引可以有效的提高数据访问效率，特别是在OLTP系统中，往往只是需要从大表中获取几行或者部分的数据记录，这个情况下索引确实是特别有效的提高数据获取速度的方法。但是在gp中
转载
2024-03-22 19:27:35
57阅读
背景Greenplum通过多版本支持数据的删除和更新的并发和回滚，在删除数据时（使用DELETE删除），对记录的头部xmax值进行标记。在删除记录时，对记录的头部进行标记，同时插入新的版本。这一就会导致一个问题，如果用户经常删除和插入或更新数据，表和索引都会膨胀。PostgreSQL是通过HOT技术以及autovacuum来避免或减少垃圾的。但是Greenplum没有自动回收的worker进程，所
转载
2024-09-19 20:40:29
108阅读
Greenplum的分布键设计问题背景最高执行指挥项目组在使用GP的过程中遇到两类问题数据插入缓慢多表join查询效率低下问题1：数据插入缓慢现象是3000条数据插入要7分钟左右。排查过程查看数据分布情况fb09_1=# select gp_segment_id, count(*) from db_xsys.t_xsys group by 1 order by 1;
gp_segment_id |
转载
2024-03-18 09:23:43
179阅读
启动虚拟机
$ cd greenplum
$ vagrant up连接master:
$ vagrant ssh mdw
$ su - gpadmin
$ Enter the password. The password is "changeme"启动GP：
gpstart
查看gp的状态：
gpstate1. 数据
1、查看greenplum分布键selectd.nspname||'.'||a.relnameastable_name,b.attnameascolumn_namefrompg_catalog.pg_classainnerjoinpg_catalog.pg_attributebona.oid=b.attrelidinnerjoinpg_catalog.gp_distribution
原创
2019-01-08 21:55:02
4311阅读
1.greenplum数据库创建分布键greenplum数据库定义分布键有两种方式，一种是建表时定义，另一种是用alter修改分布键 如果不在建表时定义分布键或修改分布键，默认为表第一个字段。 1、建表分布键跟存储类型一起设定 2、修改test表分布键： alter table test set distributed by (id)2.设定存储类型数据库存储类型分为行存储row和列存储colum
转载
2024-02-04 02:17:50
1125阅读
目录一、环境二、主备切换三、还原主节点一、环境ds1 为masterds2 为standby二、主备切换模拟手动切换1、关闭ds1ds1 节点执行关闭命令#gpstop -m此时在ds1 上执行查看集群状态命令时，就会报错2、将ds2 转变成主节点在ds2 上执行gpstate -b 时，同样会出现上述错误，这是因为ds2暂时还不是master节点。此时需要将ds2 置为master节点。在ds2
转载
2024-05-31 15:29:18
155阅读
greenplum 数据分布策略greenplum 是一个 MPP 架构的数据库，由一个 master 和多个 segment 组成（还可选配置一个 standby master），其数据会根据设置的分布策略分布到在不同的 segment 上。在 6 版本中，gp 提供了 3 个策略：随机分布、复制分布、hash 分布。随机分布在创建表的时候，使用 "DISTRIBUTED RANDOMLY"
转载
2024-03-18 16:55:53
244阅读
01重建分布式键CREATE TABLE的可选子句DISTRIBUTED BY和DISTRIBUTED RA
原创
2021-12-30 10:38:57
2781阅读
Greenplum作为一款基于PostgreSQL的OLAP分布式MPP架构，其内部的角色可以通过配置冗余来保证高可用性，无论是管理节点还是计算节点。管理节点可以为Master配置一个Standby来保证高可用，而计算节点则可以为每个Primary segment配置一个对应的Mirror segment来保证其高可用性。本文主要说明对于Segment的镜像分布，提供的几种分布策略。一般情况下，对
转载
2024-07-22 09:50:09
58阅读
Greenplum: 基于PostgreSQL的分布式数据库内核揭秘(下篇) http://www.postgres.cn/v2/news/viewone/1/454 原作者：姚延栋 创作时间：2019-05-08 17:25:25+08 采编：wangliyun发布时间：2019-05-09 08:25:28 浏览：1620
转载
2024-05-13 08:59:11
46阅读
gp建表的实例 gp 创建外部表的实例：（外部表不能建立分布键） CREATE EXTERNAL TABLE user_app_tag ( &nb
集群与节点 Elastic 本质上是一个分布式数据库，允许多台服务器协同工作，每台服务器可以运行多个 Elastic 实例。 单个 Elastic 实例称为一个节点（node）。一组节点构成一个集群（cluster）。 每个集群必须指定一个名字，默认是’elasticsearch’。节点通过集群名来发现和加入一个集群。 集群中的每个几点都可以独立运行并保存数据。索引(Index) 索引是含
转载
2024-10-18 14:14:50
82阅读
文章目录1.SQL性能下降原因2.常见通用的Join查询2.1 SQL执行顺序2.2 Join图3.索引简介3.1 索引是什么3.2 索引优势3.3 索引劣势3.4 索引分类3.5 mysql索引结构3.6 哪些情况需要创建索引3.7 哪些情况不要创建索引 1.SQL性能下降原因查询数据过多能不能拆，条件过滤尽量少关联了太多的表，太多joinjoin 原理。用 A 表的每一条数据 扫描 B表的
转载
2024-04-05 12:17:05
29阅读
虽说GREENPLUM不是开源的，可是自带的一些脚本还是可以看一看的。最近在学习其中的几个，期间经常看到使用gp_dist_random()函数，奇怪自己在ADMIN文档里并没有看到过这个函数啊，去搜了一下也没搜到。试了一试，大概知道了是个什么功能。首先连到MASTER上[gpadmin1@hadoop7 ~]$ psql psql (8.2.13) Type "help" for help.te
转载
2024-09-05 17:32:26
126阅读
目录介绍动态加载基本数据类型函数参数和返回聚合函数组合类型（Composite Type）函数接收组合类型函数返回组合类型测试调试gdblogAssertstack traceprofilegperftoolsvarlena内存上下文(MemoryContext)文件组织.c文件Makefile文件xxx.controlxxx.sql日期参考主要参考介绍接到需求，要在greenplum上开发uda
如果经常需要同时对两个字段进行AND查询,那么使用两个单独索引不如建立一个复合索引，因为两个单独索引通常数据库只能使用其中一个，而使用复合索引因为索引本身就对应到两个字段上的，效率会有很大提高。 但是，往往都没有说为什么？想知道以下问题：1、是不是在任何情况下数据库查询一次只会使用到一个索引？2、如果不是，那么什么情况下只会使用一个索引？3、那分别是什么造成上面的查询索引使用问题呢？答：与其说是
转载
2024-06-16 08:33:58
34阅读
主键和索引的区别
很多文章关于主键和索引没有做太多的比较和详细的讲解比如：php与mysql web开发（第三版）中也就只有不多的几句来说明主键和索引。其实指定列的索引就相当于对指定的列进行排序，为什么要排序呢？因为 排序有利于对该列的查询，可以大大增加查询效率。（那么可能有人认为应该对所有的列排序，这样就可以增加整个数据库的查询效率？这样的想法是错误的，原因 是建立索引也是要
转载
2024-04-25 19:55:03
26阅读
# MySQL索引名字和列名一样的探讨
在数据库设计与优化中，索引是一个不可忽视的重要元素。索引的建立可以大幅提高数据检索的效率，但在命名索引时有一些细节需要注意，比如索引名称与列名一致的情况。在本文中，我们将探讨这一主题，并提供代码示例以加深理解。
## 什么是索引？
索引是数据库中一种数据结构，用于快速查找数据。可以将其视为一本书的目录，根据索引可以快速找到某一章节，从而提高数据读取的效
原创
2024-10-20 05:03:40
63阅读
第五章 执行计划详解 5.3.4 关联 hash join hash left join NestLoop Merge join & merge left join: 因为要对左右表按关联键先进行排序，所以效率比hash join差 Merge full join：唯一可以执行full outer join的方式 Hash exists join 5.3.5 sq
转载
2024-02-08 22:47:17
61阅读
