在分布式的应用中，为了防止单点故障，保障高可用，通常会采用主从结构，当主节点挂掉后，从节点可以代替主节点提供服务。Redis通过复制 + sentinel哨兵来实现主从模式。Zookeeper通过replicated mode复制模式来实现主从模式。单从结构上看，Redis和Zookeeper都是主从架构，那Zookeeper的优势是什么？为什么要选择Zookeeper？难道只是因为Zookeep
转载
2024-01-22 21:05:20
65阅读
redis 获取锁的方法比较粗暴，获取不到，则是不断的重试；不是强一致性的，会在极端的情况下出现问题（时间偏移、红锁半数以上的节点才可以成功，会出现某节点出现宕机。导致两个以上的客户端获取半数以上投票而获取分布式锁、主从节点模式下（主从不一致的情况会导致，两个以上客户端获取分布式锁））redis的性能比zk高对于zk分布式锁而言：强一致性的特征；获取不到锁的客户端只需要监听事件则可，无
转载
2023-05-25 15:36:26
115阅读
前言最近对Redis和Zookeeper的使用场景有了新的理解，在此记录下。 对于Redis和ZK的基本用法和原理，我想就没有必要再多介绍了，毕竟网上的教程比比皆是。 在此，有两点想法，希望能对大家在Redis和Zookeeper的学习使用上有所帮助，有不同想法，欢迎讨论哟。从官网的介绍的角度来看Redis和Zookeeper的使用异同点看过很多，但是最终在我的思维里也一直没有一个清晰的定论，大概
转载
2023-09-05 14:18:34
60阅读
结论前置redis分布式锁并不可靠，但是性能高。
本质上是因为其追求高性能而牺牲了可靠性应用CAP原理解释就是redis是一个AP系统，强调了高可用性而牺牲一部分一致性，导致了redis分布式锁不可靠追求可靠性应使用zk分布式锁，但是性能不如redis。redis分布式锁的各种实现方案及优缺点分析自己实现redis分布式锁加锁只用key加锁。 问题：A加的锁，B能解。所以需要key valu
转载
2023-11-09 12:52:17
38阅读
Redis脑裂现象什么是Redis的脑裂现象当Redis主从集群环境出现两个主节点为客户端提供服务，这时客户端请求命令可能会发生数据丢失的情况。脑裂出现的场景场景一主从哨兵集群中如果当发生主从集群切换时，那么一定是超过预设quorum数量的哨兵和主库连接超时了，这时哨兵集群才会将主库判断为客观下线，然后哨兵开始选举新的主节点，进行故障转移，转移完毕后客户端和新的主节点通信恢复正常请求。如果在哨兵进
转载
2023-07-06 16:38:39
171阅读
redis 实现分布式锁: 首先redis是单线程的,即一个线程处理所有网络请求,其他模块仍用了多个线程. 1,第一种就是在set完key之后,直接设置key的有效期 ,为key设置一个超时时间,单位为second,超过这个时间锁会自动释放,避免死锁. 这种方式相当于,把锁持有的有效期,交给了redis去控制.如果时间到了,那redis就直接给你删了,其他服务器就可以继续去setnx获取锁. 2,
转载
2023-08-11 21:54:36
41阅读
背景：笔者所在的公司，上周末经历了一场大促活动后，系统暴露出这样一个问题：分布式锁使用的zk锁，由于当天大促用户量比较多，系统疯狂的加锁释放锁，最后zk承受不住这么大的压力宕机。由于马上就要618，为了避免再次发生这样的事情，公司决定把所有系统的zk锁都替换为高性能的Redis锁。在这里简单的提一下，zk锁性能比redis低的原因：zk中的角色分为leader，flower，每次写请求只
转载
2024-07-17 16:47:16
27阅读
一、zookeeper简介统一管理分布式集群，ZooKeeper 是一个集中式服务，用于维护配置信息、命名、提供分布式同步和提供组服务。分布式应用程序以某种形式使用所有这些类型的服务。每次实现它们时，都需要进行大量工作来修复不可避免的错误和竞争条件。由于实现这些服务的难度，应用程序最初通常会吝啬它们，这使得它们在发生变化时变得脆弱且难以管理。即使正确完成，这些服务的不同实现也会导致部署应用程序时的
转载
2023-07-09 20:03:48
127阅读
一 基于redis的分布式锁setnx 方式设置值；从而加锁；解锁时，为了保证原子性（查询锁，判断值并删除），需要在redis服务端用脚本来实现查询并删除；缺点是：如果master和slave结构，如果存在脑裂或者数据丢失情况，导致锁的数据没有同步，就导致了分布式锁的失效。补救方案是官方推荐的redlock方案：给每个master都尽量上锁，上锁数量是(总节点数/2+1),就认为上锁成功，比如5个
转载
2023-08-30 09:14:20
201阅读
为什么用分布式锁？在讨论这个问题之前，我们先来看一个业务场景：系统A是一个电商系统，目前是一台机器部署，系统中有一个用户下订单的接口，但是用户下订单之前一定要去检查一下库存，确保库存足够了才会给用户下单。由于系统有一定的并发，所以会预先将商品的库存保存在redis中，用户下单的时候会更新redis的库存。此时系统架构如下：但是这样一来会产生一个问题：假如某个时刻，redis里面的某个商品库存为1，
转载
2023-08-11 22:14:47
97阅读
Redis是一个开源的内存中的数据结构存储系统，它可以用作：数据库、缓存和消息中间件.它支持多种类型的数据结构，如字符串（Strings），散列（Hash），列表（List），集合（Set），有序集合（Sorted Set或者是ZSet）与范围查询，Bitmaps，Hyperloglogs 和地理空间（Geospatial）索引半径查询。其中常见的数据结构类型有：String、List、Set、H
转载
2024-03-06 21:10:16
51阅读
ZooKeeper简称zk，ApacheHadoop项目下一个子项目，是一个树性目录服务，一个分布式的、开源的分布式应用程序的协调服务（中间件）。集群：多台服务器提供相同的服务,这样的行为称为集群。主要功能：为多个应用程序提供协调服务配置管理（配置中心）用于管理服务的信息，一般包括ip、端口、服务提供的功能接口分布式锁：应用程序指定功能是否可以使用，用户控制服务的资源权限，锁住之后只能有一个服务可
转载
2024-04-21 15:45:30
92阅读
## zk 和redis 每秒的读写速度
在分布式系统中，ZooKeeper（zk）和Redis是两个常用的存储系统，它们在每秒的读写速度上有一定的差异。本文将介绍zk和Redis的每秒读写速度，并通过代码示例展示其使用方法。
### ZooKeeper（zk）
ZooKeeper是一个为分布式应用提供协调服务的开源组件，其使用简单、易于部署，适用于大规模的分布式系统。在每秒的读写速度上，z
原创
2024-03-01 03:49:48
101阅读
Kafka概念kafka是一个分布式基于发布-订阅模式的高吞吐量、高水平拓展的消息流中间件。 【重点：高吞吐量】 kafka的基础架构中主要包含的角色有：broker、生产者、消费者；当前还包含zookeeper。 生产者：负责发送消息。 消费者：负责处理消费消息。 broker：负责存储缓冲消息，创建topic，有partition分区和replication的概念。【在0.9版本之前，kafk
转载
2024-03-27 05:45:12
58阅读
目录系列文章目录前言一、分布式锁是什么？二、ZooKeeper实现分布式锁1.排它锁 1.1定义锁1.2 获取锁1.3 释放锁2.共享锁1.1 定义锁1.2 获取锁 1.3 判断读写顺序1.4 释放锁三、ZooKeeper与Redis实现分布式锁对比总结前言 因为分布式锁在分布式系统中
转载
2023-10-28 12:12:32
63阅读
在配置文件中设置使用哪个锁，使用junit测试static int total = 20;//开启循环数
@Test
@Rollback(false)
public void contextLoads() throws Exception {
Date startTime = new Date();
Long waitTime = 1000L;//线程执
转载
2024-10-21 20:19:45
49阅读
目录1. 分布式锁应用场景2. Redis分布式锁2.1 原生redis实现2.1.1 加锁2.1.2 解锁2.1.3 续期问题2.2 redisson实现2.2.1 加锁2.2.2 释放锁2.2.3 加锁源码分析2.2.4 解锁源码分析2.2.5 红锁2.2.6 不同redis集群对redisson的影响3. Zookeeper分布式锁3.1 zk实现分布式锁原理3.2 原生zookeeper
转载
2023-09-27 21:14:49
111阅读
1、redis经典五种数据类型及底层实现1.1、redis分布式锁的实现，其他方式了解吗，对比redis、zk实现分布式锁，这三个从实现方式上和锁竞争上有什么不同？redis按照一个key是否过期+lua脚本实现以及官网推荐redlock算法的落地产品redissonzookeeper按照一个zk里面只可以有且仅有一个znode节点，加锁成功就是建立一个节点，时间到期使用完了，自动删除该节点两个为
转载
2024-06-04 09:53:37
111阅读
一、Redis分布式锁1、setnx + lua脚本优点：redis基于内存，读写性能很高，因此基于redis的分布式锁效率比较高缺点：分布式环境下可能会有节点数据同步问题，可靠性有一定的影响。比如现在有一个3主3丛的Redis集群， 客户端发生的命令写入了机器1的master 节点，数据正准备主丛同步的时候，master 结点挂了，slave 结点没有接收到最新的数据，此时 slave结点竞选为
转载
2023-08-30 13:39:31
76阅读
前面我们剖析了Redisson的源码，主要分析了Redisson实现Redis分布式锁的15问，理清了Redisson是如何实现的分布式锁和一些其它的特性。这篇文章就来接着剖析Zookeeper分布式锁的实现框架Curator的源码，看看Curator是如何实现Zookeeper分布式锁的，以及它提供的哪些其它的特性。Curator框架是封装对于zk操作的api，其中就包括了对分布式锁的实现，当然
转载
2024-05-15 13:39:20
60阅读
