一、pgbackRest简介pgBackRest旨在提供一个简单可靠，容易纵向扩展的PostgreSQL备份恢复系统。pgBackRest并不依赖像tar和rsync这样的传统备份工具，而是通过在内部实现所有备份功能，并使用自定义协议来与远程系统进行通信。 消除对tar和rsync的依赖可以更好地解决特定于数据库的备份问题。 自定义远程协议提供了更多的灵活性，并限制执行备份所需的连接类型，从而提高
1.说明Kafka单机安装，基于版本1.0.1，
使用kafka_2.12-1.0.1.tgz安装包，
其中2.12是编译工具Scala的版本。
而且不需要另外安装Zookeeper服务，
使用Kafka自带的Zookeeper即可。2.安装规划Kafka:单机Zookeeper：单机，Kafka自带Jdk:安装好并且配置环境变量3.安装用户kafka/ai123456useradd -g had
转载
2023-12-07 15:51:30
88阅读
部署sparkStandalone模式的spark部署#（1）通过以下步骤，配置Worker节点
#a)重命名slaves.template文件为slaves，使用以下命令：
mv /usr/local/spark/conf/slaves.template /usr/local/spark/conf/slaves
#b)编辑slaves文件，使用以下命令：
vim /usr/local/spark
转载
2023-09-07 23:04:54
235阅读
一、单机部署（stand-alone）单个服务器，只有一个饮水机提供服务，服务只部署一份。 二、集群部署（cluster）服务器集群就是指将很多服务器集中起来一起进行同一种服务，在客户端看来就像是只有一个服务器。集群可以利用多个计算机进行并行计算从而获得很高的计算速度，也可以用多个计算机做备份，从而使得任何一个机器坏了整个系统还是能正常运行。有多个饮水机同时提供服务，服务冗余部署，每个冗
转载
2024-02-26 20:30:14
95阅读
本文以 ZooKeeper 3.7.0 版本为例，描述在 CentOS 7.6 上单机方式部署 Zookeeper 的流程。
原创
2022-04-29 16:15:01
381阅读
本文以 kafka_2.13-3.1.0.tgz 版本为例，描述在 CentOS 7.6 上单机方式部署 kafka 的流程。
原创
2022-04-29 16:15:10
826阅读
文章目录一、背景二、监控三、冷备背景安装编译环境: 产生二进制生产环境: 部署快速开始设置演示集群配置Stanza, 备份数据源在此创建Repository, 备份目的地在此配置Archive配置保留创建Stanza检查配置执行备份开始第一次全备检查第一次全备的进度效果开始第一次差异备份定时调度`全备与增量备份`备份信息备份恢复监控在pg中保留完备保留增量备份保留存档保留恢复文件所有权Delta
pgBackRest是一款开源的备份还原工具，目标旨在为备份和还原提供可靠易用的备份。
前言pgBackRest是一款开源的备份还原工具，目标旨在为备份和还原提供可靠易用的备份。特性并行备份和还原备份操作期间压缩通常是其瓶颈所在。pgBackRest通过并行处理解决了备份期间压缩出现的瓶颈问题。本地远程操作自定义协议允许 pgBackRest以最小化配置
作者简介Granthana Biswas cybertec公司工程师。译者简介王志斌，从事数据库产品相关工作，主要致力于postgresql数据库高可用解决方案及云端产品化工作。校对者简介李鑫,任职于海能达通信股份有限公司,数据库开发高级工程师,致力于postgresql数据库在专网通信领域、公共安全领域的应用与推广。在上一篇关于pgBackRest的文章中，我们了解了如何安装和设置pgBackR
转载
2024-10-11 18:10:33
87阅读
分布式系统是分布式计算机科学的主要研究对象，但是分布式系统并不是一种应用软件，分布式系统更像是一种运算方式，在以前没有出现网络是，独立的单机运算是常用的方式。但是随着日新月异的科学发展，网络时代的迅速崛起，单机计算对于资源的利用与任务的处理已经不能满足网络上越来越旁大的计算量，这时候分布式系统的出现，让这些问题得到了一定程度上的解决。 分布式系统，顾名思义，与单机计算的单独任务处理方式不同，分布式
转载
2024-05-24 21:32:05
5阅读
Hadoop 2.0.3在Linux环境下单机部署2013-05-27 14:37 与之前的稳定的hadoop-1.x相比，Apache Hadoop 2.x有较为显著的变化。这里给出在HDFS和MapReduce两方面的改进。 1.Hadoop2.0简述[1]HDFS:为了保证name服务器的规模水平，开发人员使用了多个独立的Namen
转载
精选
2013-05-29 11:25:14
389阅读
本文介绍在Linux系统(ubuntu 16.04)中搭建各种服务器的方法，包括NFS、samba、ssh、telnet。一、ssh服务器Linux(包括服务器、设备端)开启SSH，使用如ssh secure shell client等客户端工具连接、登陆，找到对应目录，可实现相互拷贝。1、安装： sudo apt-get install openssh-server2、重启： sudo/etc/
文章目录一、MongoDB概述（1）MongoDB简介（2）MongoDB特点（3）MongoDB的适用场景（4）MongoDB的非适用场景（5）MongoDB的存储结构（6）内存映射存储引擎MMAP（7）MongoDB数据类型（8）MongoDB中自带的四个数据库二、部署MongoDB（1）实验环境（2）实验步骤（3）MongoDB的操作-服务器相关操作-数据库相关操作-集合相关操作-Mong
转载
2023-08-30 20:49:25
354阅读
这两天在使用proxychains设置代理上网的时候，遇到了一些原来学过的名词，但是只是生硬的对照着教程在走，但是里面一些概念不是很明白，这里遇到了就刚好记录、理解一下。1. IP: IP地址是在网络上分配给每台计算机或网络设备的32位数字标识。在Internet上，每台计算机或网络设备的IP地址是全世界唯一的。在网络上的计算 机就是通过这个唯一的IP地址查找网络上的其他计算机并与之通信。IP地址
进程结构1、postgres server process是所有PostgreSQL数据库管理的父进程，在早期的版本种称为postmaster。
（1）随着pg_ctl start，postgres server process也随之启动。
（2）分配shared memory
（3）启动一系列后台进程，复制相关的进程，后台工作者进程
（4）当客户端连接的时候，通过调用操作
1.如何把开始的建表语句给导出来?pg_dump -d dbname -t tablename -s > sql.txt全部一起出来pg_dump -d dbname -s > sql.txt 可以指定 function,view,trigger,type2.热备份pg_standby 支持创建“热备份”的数据库服务器。它被设计成是可用于生产环境的程序，并且还包括可以客户化的模版，这样
序言
docker需要存储的时候，将相关的数据存储在什么位置呢？镜像存储在哪里。数据又存储在哪里。 容器共享数据的时候怎么来共享？容器和主机共享，容器和容器怎么共享数据。
docker持久化管理之bind
docker将需要存储的数据存储在doc
转载
2023-08-23 16:03:25
274阅读
zk用处如此之多，以至于每个地方都要你理解zk原理！请按如下操作姿势打开: 1. 打开zk的git仓库地址： https://github.com/apache/zookeeper , 确认过眼神，它就是你要找有人！ 2. 下载源码到本地，下载 ant 工具到本地，（如果还没下载的话: http://ant.apache.org/）！ 3. 运行 ant 脚本，使生成需要
转载
2024-02-19 22:07:10
148阅读
-----------安装：1，必须的库： 两个库：BerkeleyDB，用于内部数据库的使用；和OpenSSL，用于加密方法，无法被其他库取代。2，下载：http://www.cfengine.org3，安装：步骤1：从开源代码安装Cfengine$ tar zxf cfengine-2.x.x.tar.gz$ cd ./cfengine-2.x.x$ ./configure$ make$ su
原创
2013-10-29 09:58:53
546阅读
单机版的TiDB体验注：操作系统是CentOS7.4、Ubuntu16#下载压缩包wgethttp://download.pingcap.org/tidb-latest-linux-amd64.tar.gzwgethttp://download.pingcap.org/tidb-latest-linux-amd64.sha256#检查文件完整性，返回ok则正确sha256sum-ctidb-lat
原创
2018-09-09 14:49:30
4836阅读
