1. PL/Proxy的介绍1.1 PL/Proxy概述 PL/Proxy是一款能在PostgreSQL数据库实现数据库水平拆分的软件；可以理解分布式架构(shared nothing);但是不是真正的分布式数据库软件；也是一款能在PostgreSQL数据库实现SQL语言复制(replication) 分布式架构图如下：1.2 PL/Proxy集群配置 PL/Proxy既能配置成“CONNE
今天，利用大家的休息时间分享postgresql分布式集群，利用Citus实现分库分表。一、Citus是什么citus是PG的一个sharding插件，可以把PG变成一个分布式数据库。目前在苏宁有大量的生产应用跑在citus+pg的环境中。大家可以看it大咖视频。
citus是一款基于PostgreSQL的开源分布式数据库,自动继承了PostgreSQL强大的SQL支持能力和应用生态（不仅
standalone、spark on mesos和 spark on YARN，其中，第一种类似于MapReduce 1.0所采用的模式，内部实现了容错性和资源管理，后两种则是未来发展的趋势，部分容错性和资源管理交由统一的资源管理系统完成：让Spark运行在一个通用的资源管理系统之上，这样可以与其他计算框架，比如MapReduce，公用一个集群资源，最大的好处是降低运维成本和提高资源利用率（资源
Apache Spark探秘：三种分布式部署方式比较目前Apache Spark支持三种分布式部署方式，分别是standalone、spark on mesos和 spark on YARN，其中，第一种类似于MapReduce 1.0所采用的模式，内部实现了容错性和资源管理，后两种则是未来发展的趋势，部分容错性和资源管理交由统一的资源管理系统完成：让Spark运行在一个通用的
作为一名刚刚入职的码农，整日被各种各样的数据库整的头昏脑涨，偶然所得了解到了POSTGRESQL这一款开源数据库神器，作为我们架设分布式数据库的工具。下面简单聊聊POSTGRESQL。网上是这么介绍的：PostgreSQL是一种特性非常齐全的自由软件的对象-关系型数据库管理系统（ORDBMS），是以加州大学计算机系开发的POSTGRES，4.2版本为基础的对象关系型数据库管理系统。POSTGRES
转载
2024-05-01 22:33:53
170阅读
一、高并发下分布式Session需解决的问题： 1.透明处理存储介质的故障转移2.动态增删节点，减小“缓存颠簸”问题3.保证数据在各个节点的分布均衡4.
转载
2024-04-09 10:46:52
86阅读
最近一直在寻找postgresql的分布式解决方案，试过pgpool-ii，plproxy，但都不太满意，昨天意外发现了一种开源的分布式postgresql解决方案，stado,前身是enterprise公司开发的gridsql（开源，但现在已经停止更新），今天测试后发现和阿里的cobar有点类似，在此分享下安装和初步试用。 （一）.下载stado软件，地址为：http://www.st
1.spark集群的部署 Hadoop1Hadoop2Hadoop3datanode√√√Namenode√ Secondary √ Master√ Worker√√√Zookeeper√√√2.standalone模式的普通模式搭建第一步：安装JDK1.8第二步：安装Scala2.11.8第三步：安装hadoop（只需要安
转载
2024-02-17 21:36:54
0阅读
Postgres-XL是一个可横向扩展的开源数据库集群，基于Postgres-XC，而Postgres-XC又是基于PostgreSql。PostgreSQL许可证是一种自由开源许可证，类似于BSD或MIT许可证。Postgres-XL功能：数据库集群；可横向扩展；提供多种表分片策略；采用MPP架构模式（OLAP），可以与OLTP混合使用。 Postgres-XL特性：可横向扩展的关
转载
2024-09-08 09:50:55
45阅读
文章目录一、结果展示二、我学到的1、Maven构建多模块2、lombok的使用3、maven没有gradle方便三、对作者的建议3.1 有误之处3.2 期待改进之处 读者盆友好，这段时间集中精力研究下Redis，把实战、学习过程记录下。内容来自：《分布式中间件技术实战(Java版)》 钟林森 编著 这本书果然很“实战”，非常容易上手。看了第一篇后立马实战了下，除了安装lombok插件花费了点时间
转载
2024-05-30 09:55:07
42阅读
目录前言一、配置规划二、操作系统配置1.创建用户和组2.创建目录并授权3.修改用户资源限制4.添加环境变量5.关闭防火墙6.关闭selinux三、数据库安装1.上传挂载安装镜像2.注册DMAP服务3.初始化数据库实例四、MPP主备配置1、MPP主库备份，备库恢复2、各实例配置dm.ini3、配置归档日志dmarch.ini4、配置MAL系统配置文件dmmal.ini（所有实例一致）5、配置MPP配
转载
2024-09-13 22:30:16
76阅读
分布式数据库： 一群分布在计算机网络上，逻辑上相互关联的数据库 分布式计算系统 要求它具备一定数量的自主处理单元，这些单元通过计算机网络互连并且协同处理他们各自分配到的任务 分布式数据库系统（DDBS）包含分布式数据库系统管理（DDBMS）和分布式数据库（DDB） DDBS的基础问题 分布及
目录分布式事务什么是分布式事务？分布式事务的实现方式有哪些？两阶段提交和三阶段提交的区别是什么？TCC事务模型是如何解决分布式事务的？分布式事务的强一致性和最终一致性有什么区别？如何保证分布式事务的可靠性？分布式事务的优缺点是什么？空回滚（Empty Rollback）和防悬挂（Hang Prevention）是什么？分布式锁什么是分布式锁？为什么在分布式系统中需要使用分布式锁？分布式锁的实现方式
转载
2023-10-02 10:08:51
119阅读
原生分布式数据库已经成为数据库领域最重要的发展方向之一。相比集中式数据库，原生分布式核心数据库具有高可用、高扩展、高兼容、易管理、高稳定性、运维成本低、部署灵活等明显优势。有机构调查显示，超过90%的企业都认为原生分布式数据库具备更优异的应对能力和部署效果。为了给企业IT架构决策者及应用开发者提供参考，近日，全球权威IT咨询机构Forrester发布了首份分布式数据库市场调研报告——“Now Te
转载
2024-04-26 19:00:58
66阅读
1.ssm框架整合redis使用spring中封装的各种数据库支持redisTemplate<dependency>
<groupId>org.springframework.data</groupId>
<artifactId>spring-data-redis</artifactId>
转载
2023-06-30 13:14:13
43阅读
1. Redis事务机制 1. 与MySQL等关系数据库相同，Redis中也有事务机制，Redis的事务实质上是命令的集合，但Redis中的事务机制不保证事务的原子性，这与关系型数据库中的事务不同，在一个事务中要么所有命令都被执行，要么所有事物都不执行。 一个事务从开始到执行会经历以下三个阶段：开始事务。命令入队。执行事务。在MySQL中使用START
转载
2023-08-31 10:04:15
95阅读
概述分布式事务的实现主要有以下 6 种方案：XA 方案TCC 方案SAGA 方案本地消息表可靠消息最终一致性方案最大努力通知方案两阶段提交方案/XA 方案简单来说就是事务管理器先问问各个数据库准备好了吗，每个要操作的数据库都回复事务管理器ok，那么就正式提交事务。TCC 方案TCC 的全称是： Try 、 Confirm 、 Cancel 。Try 阶段：这个阶段说的是对各个服务的资源做检测以及对
转载
2024-06-05 15:02:16
37阅读
概述在只有一台机器的情况下，我们也会碰到类似的情况，比如在多个线程需要访问某个共享资源的时候，我们就可以采用加锁的形式。在Java中，一个简单的办法就是使用synchronized关键字来对方法或者变量加锁。 但是，这种加锁方式在进程之间的共享就显得力不从心了起来。为了解决这样的问题，我们必须引入分布式锁。分布式锁一般会用于互斥资源的访问。 在这里，我们将使用MySQL数据库来实现分布式锁。当然，
转载
2023-08-08 14:29:15
44阅读
什么是 RedissonRedisson是架设在Redis基础上的一个Java驻内存数据网格（In-Memory Data Grid）。充分的利用了Redis键值数据库提供的一系列优势，基于Java实用工具包中常用接口，为使用者提供了一系列具有分布式特性的常用工具类。使得原本作为协调单机多线程并发程序的工具包获得了协调分布式多机多线程并发系统的能力，大大降低了设计和研发大规模分布式系统的难度。同时
转载
2023-08-08 21:52:44
61阅读
构建应用分布式系统运维一、 理论知识 1.nginx Nginx 是一款小巧且高效的 Linux下 Web 服务器软件。由 Igor Sysoev 为俄罗斯访问量第二的 Rambler 站点开发，已在一些俄罗斯大型网站上运行多年，相当稳定。第一公开版本 0.1.0 发布于 200
转载
2024-10-24 19:18:06
48阅读
