不啰嗦，我们直接开始！引言2020年，Kafka 依旧炙手可热，一线大公司即使不用Kafka，但是自研产品也都是基于Kafka，或者完全借鉴Kafka设计思想，理论上来说，如果你还没熟练掌握一个MQ框架，Kafka绝对是不错的选择。关于历史，如果你感兴趣了解一下，至少知道是哪个公司开源的，Kafka最初于2011年在 LinkedIn 开发，自那时起经历了很多改进，后来捐献给Apache基金，如今
概述为了防止分布式系统中的多个进程之间相互干扰，我们需要一种分布式协调技术来对这些进程进行调度。而这个分布式协调技术的核心就是来实现这个分布式锁。为什么要使用分布式锁 成员变量 A 存在 JVM1、JVM2、JVM3 三个 JVM 内存中成员变量 A 同时都会在 JVM 分配一块内存，三个请求发过来同时对这个变量操作，显然结果是不对的不是同时发过来，三个请求分别操作三个不同 JVM 内存
转载
2023-08-12 12:37:06
77阅读
一、幂等性概念在编程中.一个幂等操作的特点是其任意多次执行所产生的影响均与一次执行的影响相同。幂等函数，或幂等方法，是指可以使用相同参数重复执行，并能获得相同结果的函数。这些函数不会影响系统状态，也不用担心重复执行会对系统造成改变。例如，“getUsername()和setTrue()”函数就是一个幂等函数. 更复杂的操作幂等保证是利用唯一交易号(流水号)实现.我的理解：幂等就是一个操作，不论执行
转载
2024-08-15 02:01:38
74阅读
接口幂等性幂等性是什么：一个接口在入参相同的情况下，被多次发起请求，多次调用产生的结果与一次调用是相同的，简单说其实就是必须保证只有一次请求操作被执行主要原理：定义切面拦截请求，利用Redis的分布式锁Redisson，对接口的入参比如用户token设置成一个key，或者基于业务去组合一个唯一key，再给这个key设置一个过期时间，这样就保证了在一段时间内同样的请求只能取到一个锁，从而保证接口的幂
转载
2023-08-01 13:42:12
272阅读
幂等定义在计算机科学中,一个操作如果多次执行产生的影响与一次执行的影响相同,这样的操作即符合幂等性。在分布式系统中,服务消费方调用服务提供方的接口,多次调用的结果应该与一次调用的结果一样,这正是分布式环境下幂等性的语义。需求背景跨中心微服务操作需要进行幂等验证，分布式微服务架构服务间频繁使用网络通信，由于网络不可靠网络震荡、客户端重试都导致产生重复请求，传统方式根据流水查询日志表无法保证高并发情况
转载
2024-01-10 18:12:31
69阅读
接口幂等性的设计之————redis分布式锁的应用在集群分布式机器部署的前提下，接口在相同数据高并发的情况下如果没有唯一索引的情况下，可能会有一些问题。比如：插入或更新商品的接口，如果没有则插入，有则更新的接口。支持多次修改。考虑一种情况，前端页面第一次提交时瞬间点击多次。这种情况下会先去数据库查询，然后再插入。（当然唯一索引也可以解决，但是这种的有一次提交将会被拒绝）。所有分布式锁的使用场景可以
转载
2023-12-23 20:43:27
70阅读
1. 概念Token机制是实现接口幂等性的一种常见策略，尤其是在处理如订单创建、支付确认等敏感操作时，确保即使用户因网络延迟、误操作等原因重复提交请求，系统也能保证结果的一致性，避免产生多次订单、多次扣款等问题。2. Token机制的实现原理**1. 生成Token：**在客户端首次发起请求之前，服务端为该特定操作生成一个唯一的Token（通常是一个随机字符串）。这个Token需要具备不可预测性和
前言 现如今很多系统都会基于分布式或微服务思想完成对系统的架构设计。那么在这一个系统中，就会存在若干个微服务，而且服务间也会产生相互通信调用。那么既然产生了服务调用，就必然会存在服务调用延迟或失败的问题。当出现这种问题，服务端会进行重试等操作或客户端有可能会进行多次点击提交。如果这样请求多次的话，那最终处理的数据结果就一定要保证统一，如支付场景。此时就需要通过保证业务幂等性方案来完成。什么是幂等
原创
2024-04-13 09:34:38
36阅读
kafka实现消息精确可靠性的机制是幂等性和事务。幂等指的是某些操作或函数能够被执行多次，但每次得到的结果都是不变的。幂等性的其最大的优势在于可以安全地重试任何幂等性操作，反正不会破坏我们的系统状态。幂等性producer: Producer 默认不是幂等性的，但我们可以创建幂等性 Producer。指定消息生产者幂等性的方法设置enable.idempote
转载
2024-04-13 00:45:56
78阅读
目录一、回顾分布式锁（一）理解分布式锁的定义（二）分布式锁的约束条件（三）分布式锁常见实现方式基于数据库的分布式锁基于缓存的分布式锁基于分布式一致性算法的分布式锁基于文件系统的分布式锁基于消息队列的分布式锁基于第三方服务的分布式锁二、分布式锁Redis原理（一）Redis分布式锁的基本原理总揽（二）核心指令：加锁示例加锁参数解析（三）核心指令：解锁（四）错误案例分析：setNx（五）常见解锁方案：
文章目录幂等性方案一方案二幂等性幂等
原创
2022-03-30 16:37:19
158阅读
https://www.ibm.com/developerworks/cn/java/j-spring-boot-aop-web-log-processing-and-distributed-locking/index.html
原创
2022-09-15 11:30:11
39阅读
什么是幂等性 在分布式系统中，多系统之间接口调用的时候我们经常听到幂等性，那么幂等是啥？幂等最早是一个数学概念，在数学与计算机学中幂等(Idempotence) 是指相同参数重复执行，并能获得相同结果的函数。这里还有个公式：f(f(x)) = f(x)。 在编程领域里通俗说是指一个操作重复执行N次得到的结果与执行一次是相等的。 举例子更加容易理解 1. 前端重复提交选中
转载
2024-01-26 08:14:08
65阅读
所谓幂等性，就是说一个接口，多次发起同一个请求，你这个接口得保证结果是准确的，比如不能多扣款，不能多插入一条数据，不能将统计值多加了1。这就是幂等性，不给大家来学术性词语了。 其实保证幂等性主要是三点： （1）对于每个请求必须有一个唯一的标识，举个例子：订单支付请求，肯定得包含订单id，一个订单id最多支付一次，对吧 （2）每次处理完请求之后，必须有一个记
转载
2024-01-08 15:38:14
43阅读
1|0前言现如今很多系统都会基于分布式或微
转载
2022-06-16 17:24:15
104阅读
1|0前言 现如今很多系统都会基于分布式或微服务思想完成对系统的架构设计。那么在这一个系统中，就会存在若干个微服务，而且服务间也会产生相互通信调...
原创
2022-03-11 10:43:17
331阅读
在之前的旧版本中，Kafka只能支持两种语义：At most once和At least once。At most once保证消息不会朝服，但是可能会丢失。在实践中，很有有业务会选择这种方式。At least once保证消息不会丢失，但是可能会重复，业务在处理消息需要进行去重。、 Kafka在0.11.0.0版本支持增加了对幂等的支持。幂等是针对生产者角度的特性。幂等可以保证上生产者发送的消息
转载
2024-03-03 23:22:16
67阅读
Kafka为啥需要幂等性？Producer在生产发送消息时，难免会重复发送消息。Producer进行retry时会产生重试机制，发生消息重复发送。而引入幂等性后，重复发送只会生成一条有效的消息。Kafka作为分布式消息系统，它的使用场景常见与分布式系统中，比如消息推送系统、业务平台系统（如物流平台、银行结算平台等）。以银行结算平台来说，业务方作为上游把数据上报到银行结算平台，如果一份数据被计算、处
转载
2023-05-23 13:18:54
121阅读
接口幂等性幂等性：f(f(x)) = f(x)，幂等元素运行多次，还等于它原来的运算结果。在系统中，一个接口运行多次，与运行一次的效果是一致的。什么时候需要幂等性？并不是所有的接口都要求幂等性，要根据业务设计。重复提交、接口重试、前端操作抖动等场景，例如用户一次提交一个订单，支付时只能扣一次钱。幂等性策略核心思想：通过**唯一的业务单号**保证幂等性。非并发的情况，可以查询某个业务是否操作过，没有
欢迎关注公众号（通过文章导读关注：【11来了】），及时收到 AI 前沿项目工具及新技术的推送！在我后台回复 「资料」 可领取编程高频电子书！在我后台回复「面试」可领取硬核面试笔记！前言最近在更新面试突击专栏，我把每一篇将字数都尽量控制在 2000 字以内，可能在文章里边写的没有那么细致，主要是提供一些 问题 以及 回答的思路 ，以及 面试中可能忽略的漏洞 ，所以在看完文章之后，如果自己简历中有这方
原创
2024-01-22 21:11:31
118阅读
