JAVA常用操作redis工具类key相关操作import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.cache.annotation.CachingConfigurerSupport;
import org.springframework.dao.DataAccessExc
转载
2024-07-25 21:38:02
26阅读
一、简介幂等性是分布式中比较重要的一个概念，是指在多作业操作时候避免造成重复影响，其实就是保证同一个消息不被消费者重复消费两次，但是可能存在网络波动等问题，生产者无法接受消费者发送的ack信息，因此这条消息将会被重复发送给其他消费者进行消费，实际上这条消息已经被消费过了，这就是重复消费的问题。如何避免重复消费的问题 1.消息全局唯一ID 2.通过redis中的setnx命令，给消息分配一个全局ID
转载
2024-04-10 10:34:59
116阅读
# 如何实现Redis重复消费过期Key
## 介绍
作为一名经验丰富的开发者，我将向你介绍如何实现Redis重复消费过期Key的方法。这对于刚入行的小白来说可能有些困难，但只要按照以下步骤进行操作，你就能成功实现它。
### 流程图
```mermaid
flowchart TD;
A(开始)-->B(生成唯一标识);
B-->C(存储标识到Redis);
C-->D
原创
2024-03-04 06:56:02
39阅读
文章目录前言1、方案实践1.1、引入Redis依赖1.2、添加Redis环境配置1.3、编写获取请求唯一ID的接口，同时将唯一ID存入redis1.4、编写服务验证逻辑，通过 aop 代理方式实现1.5、在相关的业务接口上，增加SubmitToken注解即可2、小结 前言在上一篇文章中，我们详细的介绍了对于下单流量不算高的系统，可以通过请求唯一ID+数据表增加唯一索引约束这种方案来实现防止接口重
转载
2023-08-04 16:25:10
181阅读
文章目录为什么会重复下单如何防止重复下单利用数据库实现幂等利用Redis防重 为什么会重复下单为什么会重复下单，对于订单服务而言，就是接到了多个下单的请求，原因可能有很多，最常见的是这两种：用户重复提交网络原因导致的超时重试如何防止重复下单防止用户提交，最常规的做法，就是客户端 点击下单之后，在 收到服务端响应之前，按钮置灰！！！当然，防止重复下单，肯定不能只依靠客户端，可能会因为一些网络的抖动
转载
2023-08-11 13:33:31
98阅读
场景描述：前不久，我在服务器上面装了一个 redis ，然后往里面存了一些数据，过一段时间去查看，发现我之前存的数据被删掉了，起初以为是数据过期了，redis 自动把这些删掉的，之后我又存入了一些永不过期的数据进去，可是过了一段时间之后去查看，这些数据还是被删掉了，对于一个刚入门不久的菜鸟而言，是一脸的懵逼，遇到问题就想办法去解决呗~，随后又重学了一遍 redis 的数据删除和淘汰策略，好像跟永不
转载
2023-08-09 21:16:45
70阅读
1Kafka消费模式 从kafka消费消息，kafka客户端提供两种模式: 分区消费，分组消费。分区消费对应的就是我们的DirectKafkaInputDStream分组消费对应的就是我们的KafkaInputDStream消费者数目跟分区数目的关系:1)，一个消费者可以消费一个到全部分区数据2)，分组消费，同一个分组内所有消费者消费一份完整的数据，此时一个分区数据只能被一个消费者消费
转载
2024-03-16 15:39:33
67阅读
问题描述最近在项目开发过程中遇到了高并发造成的违反业务唯一性的问题。使用了RabbitMQ作为消息中间件，创建消费者应用监听RabbitMQ，获取到消息以后进行业务处理（业务处理时都有通过查询数据库来完成业务唯一性的验证），每个消费者应用限制可以同时处理100条消息，共部署四台消费者应用。因此会产生上限为400的并发。因为业务的原因无法在数据库加唯一索引来限制，所以通过Redis来实现并发锁。实现
转载
2023-08-22 12:30:43
20阅读
一般来说，消息队列有两种场景：一种是发布者订阅者模式；一种是生产者消费者模式。利用redis这两种场景的消息队列都能够实现。定义：生产者消费者模式：生产者生产消息放到队列里，多个消费者同时监听队列，谁先抢到消息谁就会从队列中取走消息；即对于每个消息只能被最多一个消费者拥有。（常用于处理高并发写操作）发布者订阅者模式：发布者生产消息放到队列里，多个监听队列的消费者都会收到同一份消息；即正常情况下每
转载
2023-08-18 18:51:49
341阅读
测试目的本次测试目的是 消费 Redis List类型 里的数据 以各种方式来快速消费，得到最佳消费方式。消费框架为 spring boot，消费工具库为 lettuce，结合redisredisTemplate 的 api 来载入和消费数据，消费数据量分别为 1.5w、2w、10w。消费数据会提前加载到 Redis list 中，消费api 为 redisredisTemplate.opsFor
转载
2023-07-13 11:13:50
275阅读
延迟消息队列在我们的日常工作中经常会被用到，比如支付系统中超过 30 分钟未支付的订单，将会被取消，这样就可以保证此商品库存可以释放给其他人购买，还有外卖系统如果商家超过 5 分钟未接单的订单，将会被自动取消，以此来保证用户可以更及时的吃到自己点的外卖，等等诸如此类的业务场景都需要使用到延迟消息队列，又因为它在业务中比较常见，因此这个知识点在面试中也会经常被问到。我们本文的面试题是，使用 Redi
转载
2023-09-08 22:08:16
76阅读
在实际开发中，我经常遇到 Redis 消费相关的问题，尤其是在高并发和大数据量的场景下，如何有效管理和消费 Redis 的数据成为一个亟待解决的问题。接下来，我将详细记录这一过程，并提供一些具体的解决方案。
### 环境预检
在部署 Redis 消费环境之前，首先需要确保系统的硬件与软件环境满足需求。下面是我所使用的环境预检信息，通过思维导图与硬件拓扑可以清晰展示。
```mermaid
m
RocketMQ使用过程中，如何进行消息重试。首先，我们需要明确，只有当消费模式为 MessageModel.CLUSTERING(集群模式) 时，Broker才会自动进行重试，对于广播消息是不会重试的。集群消费模式下，当消息消费失败，RocketMQ会通过消息重试机制重新投递消息，努力使该消息消费成功。当消费者消费该重试消息后，需要返回结果给broker，告知broker消费成功(Consume
转载
2024-06-17 13:36:31
87阅读
简使用pop，不能保证最少消费一次，比如pop超时可能中途丢失，或者消费者处理过程中异常而未能处理完。解决此问题有多种方法：1) 方法一：使用rpoplpush替代pop这种方法相当于建立了一个回滚，由于操作是在redis端完成的，可保证数据不会丢，当消费者完成业务逻辑后，再清掉lpush的另一队列，这步有点类似于事务的commit提交。如果在处理过程中消费者异常重启，则在重
转载
2023-08-17 16:47:50
945阅读
简使用pop，不能保证最少消费一次，比如pop超时可能中途丢失，或者消费者处理过程中异常而未能处理完。解决此问题有多种方法：方法一：使用rpoplpush替代pop这种方法相当于建立了一个回滚，由于操作是在redis端完成的，可保证数据不会丢，当消费者完成业务逻辑后，再清掉lpush的另一队列，这步有点类似于事务的commit提交。如果在处理过程中消费者异常重启，则在重启时先检查lpu
转载
2023-07-28 14:57:05
164阅读
优雅停机的时机1、执行 kill 前提前触发下线理想状态下，所有服务可以暴露出来的一个下线接口，我们可以通过运维的自动化脚本提前执行下线，然后等待片刻，再执行 kill pid遗憾的是，我们运维层面并没有做此规定，但有两个接口可以达到类似的效果1、dubbo 的 qos 接口2、spring boot actuator 的 shutdown 端点spring boot actuator 我们很多应
转载
2024-09-29 13:54:35
35阅读
一、说说什么是Redis、及特点？Redis是一个基于内存存储数据运行并支持持久化、使用key/value形式存储的高性能的nosql数据库，适合用于存储频繁访问，数据量较小的场景下。 特点：支持数据持久化：可以将内存中的数据保持在磁盘中，重启的时候可以再次加载进行使用。支持多种数据结构：不仅支持简单的key-value类型数据，同时还提供string、list、set、zset、hash等数据结
转载
2024-06-21 09:31:32
89阅读
目录背景热Key和大Key的概念产生的原因检测大KEY和热KEY的主要方法 解决方法背景 在redis的使用过程中如果出现了大Key和热Key的问题将会影响用户的体验，会导致服务的性能下降、甚至造成大面积故障。本文将介绍大Key与热Key产生的原因，以及如何去检测和优化大Key和热Key。热Ke
转载
2023-06-13 15:29:20
365阅读
1.前提通过RabbitMQ的延时交换器插件实现消息延时触发，延时结束后消息push到队列，消费者开始消费消息。我们项目中的商城模块待支付订单超时修改订单状态为已失效的功能就是通过以上逻辑实现。消息消费完成后采用的是手动ack的方式2.问题描述生产者产生消息正常，通过日志可以证明消费者一直监听不到消息导致超时的订单状态未能及时变更3.问题分析一： 交换器和队列之间没有绑定关系，或者绑定关系错误通过
转载
2023-08-01 17:34:16
175阅读
key通用操作key是一个字符串，通过key获取redis中保存的数据key所涉及的操作对于key自生状态的相关操作，例如：删除，判定存在，获取类型等对于key有效性控制的相关操作，例如：有效期设定，判断是否有效，有效状态的切换等对于key快速查询操作，例如：按指定策略查询key key基本操作删除指定key: del key获取key是否存在：exists key获取key的类型：type ke
转载
2023-06-29 14:16:59
120阅读
