底层存储当其他人问你Redis是如何用单线程来实现每秒10w+的QPS，你会如何回答呢？使用IO多路复用非CPU密集型任务纯内存操作巧妙的数据结构我们今天就来盘盘Redis数据结构到底有多巧妙！「Redis所有的数据结构都是在内存占用和执行效率之间找一个比较好的均衡点，不一味的节省内存，也不一味的提高执行效率」Redis底层就是一个大map，key是字符串，value可能是字符串，哈希，列表等。
转载
2024-06-30 15:09:14
30阅读
nginx 的反向代理也是采用了IO多路复用1.是什么I/O网络 I/O多路多个客户端连接（连接就是套接字描述符，即socket 或者 channel），指的是多条 TCP 连接复用用一个进程来处理多条的连接，使用单进程就能实现同时处理多个客户端的连接总结实现了用一个进程来处理大量的用户连接IO多路复用类似一个规范和接口，落地实现是由 linux系统的 select -> poll ->
【大厂面试题】说下 IO 多路复用？
推荐
原创
2023-07-04 12:14:01
2046阅读
IO多路复用（Input/Output Multiplexing）是一种在单个线程中管理多个输入/输出通道的技
原创
2023-07-16 00:40:54
102阅读
# Redis多路IO复用面试实现
## 导言
在实际开发中，我们经常会遇到需要同时处理多个网络连接的场景，尤其是在高并发的情况下。传统的方法是使用多线程或多进程来处理每个连接，但这种方式会消耗大量的系统资源。为了解决这个问题，Redis引入了多路IO复用机制，通过单线程同时处理多个连接，提高了系统的并发性能。
在本篇文章中，我将向你介绍如何实现Redis的多路IO复用机制。首先，我将解释整个
原创
2023-09-12 18:03:05
20阅读
1. 为什么Redis要使用I/O多路复用机制呢？因为Redis是单线程的，所有的操作命令都是顺序执行的，一旦有读写操作命令，等待用户输入或输出就会造成阻塞，所以I/O操作在一般情况下往往不能直接返回，这会导致某一操作的I/O阻塞导致整个进程无法进行其他操作，而I/O多路复用就是为了解决这个问题而出现的。2. 什么是I/O多路复用？I/O多路复用是指在单个线程中通过记录跟踪每一个socket（I/
转载
2023-08-08 11:36:44
120阅读
Redis IO 多路复用机制基于linux select/epoll
select：最大支持1024个文件描述符，在描述符较多情况下性能较差，水平触发poll：poll与select基本相同，只是没有文件描述符的限制epoll：文件描述符为系统上限，在描述符较多情况下性能较好，同时支持水平与边缘触发内核可同时监听多个监听套接字和 多个已连接套接字一旦内核监听到套接字上有数据返回，立刻交给r
转载
2023-11-02 14:34:03
117阅读
redis6以前单线程，6之后对于异步删除操作引入多线程，来完善自己，但是对于大部分命令，依旧是原子的。 redis压测 redis-benchmark -h 127.0.0.1 -p 6379 -c 50 -n 10000 -t set 并发50 连接数10000 redis-benchmark -h 127.0.0.1 -p 6379 -c 50 -n 10000 -q大概写8w，读10wqp
转载
2023-11-01 18:07:19
104阅读
最近在看 UNIX 网络编程并研究了一下 Redis 的实现，感觉 Redis 的源代码十分适合阅读和分析，其中 I/O 多路复用（mutiplexing）部分的实现非常干净和优雅，在这里想对这部分的内容进行简单的整理。几种 I/O 模型为什么 Redis 中要使用 I/O 多路复用这种技术呢？首先，Redis 是跑在单线程中的，所有的操作都是按照顺序线性执行的， 但是由于读写操作等待用户输入或输
转载
2023-07-10 23:13:31
322阅读
redis单线程模型I/O多路复用（select，poll，epoll，epoll的两种工作模式）io多路复用i/o : 网络I/O多路: 多个客户端连接，(连接就是套接字描述符，socket或者channel)，指多条TCP连接复用：用一个线程来处理多条连接，使用单线程就能实现同时处理多个客户端连接。这里的复用指的就是对进程的复用IO multiplexing就是我们说的select，poll，
转载
2023-08-20 15:44:34
369阅读
目录Redis的I/O多路复用概念介绍同步异步阻塞非阻塞总结阻塞IO和非阻塞IOBIO(阻塞IO)NIO(非阻塞IO)NIO的优缺点I/O多路复用五种I/O模型总结文件描述符概念Reactor模式select方法执行流程缺点poll方法执行流程解决的问题epoll方法epoll的三大函数执行流程三个方法对比为什么三个函数都要保有Redis单线程为什么那么快 Redis的I/O多路复用Redis利
转载
2023-07-13 11:00:47
120阅读
什么是阻塞，非阻塞，异步同步，select，poll，epoll？今天我们用一遍文章解开这多年的迷惑。首先我们想要通过网络接收消息，是这样的一个步骤。用户空间向内核空间请求网络数据内核空间把网卡数据读取到内核缓冲区将内核缓冲区的数据复制到用户缓冲区根据我们请求数据的情况不同，以及内核缓冲区到用户缓冲区的不同，分为了阻塞，非阻塞，异步同步的区别。在《UNIX网络编程》一书中，总结归纳了5种I0模型:
转载
2023-07-20 14:55:14
100阅读
前言IO多路复用目前在大厂的面试中，一般在两个地方可能会被问到，一个是在问到网络这一块的时候，另一个是在问到 Redis 这一块的时候，因为 Redis 底层也是使用了IO多路复用，所以整体来说 IO多路复用，也算是一道比较高频的一个面试题，所以今天跟大家来分享一下。本文内容有视频版本，喜欢看视频的同学可以直接通过下面的链接观看。如果你对文章的内容有疑惑，可以先看视频的对应内容，视频可能讲的会更细
转载
2024-03-12 16:36:20
80阅读
场景 有100万个客户端同时与一个服务器进程保持着TCP连接。而每一时刻，通常只有几百上千个TCP连接是活跃的 (事实上大部分场景都是这种情况)。如何实现这样的高并发？为什么使用IO多路复用 Redis 是跑在单
转载
2023-10-11 16:40:43
111阅读
目录一、前置知识1、操作系统2、内核和用户空间3、IO4、文件描述符（FD-File Descriptor ）二、Redis之IO多路复用1、问答1.1、Redis采用单线程的原因？1.2、如果万一CPU成为你的Redis瓶颈了，或者，你就是不想让服务器其他核闲置，那怎么办？1.3、单线程模型1.4、IO多路复用用来解决Redis的什么问题？1.5、单线程模型每秒万级别处理能力的原因2、IO模型（
转载
2023-09-04 19:13:16
58阅读
IO 多路复用机制，核心思想是让单个线程去监视多个连接，一旦某个连接就绪， 也就是触发了读/写事件。 就通知应用程序，去获取这个就绪的连接进行读写操作。 也就是在应用程序里面可以使用单个线程同时处理多个客户端连接，在对系统资 源消耗较少的情况下提升服务端的链接处理数量。 在IO 多路复用机制的实现原理中，客户端请求到服务端后，此时客户端在传输 数据过程中，为了避免Server 端在read 客户端
转载
2023-10-14 00:17:49
113阅读
IO多路复用允许同时对多个IO事件进行控制 同时监控多个“文件描述符” 这种方式就相当于你去钓鱼 你钓鱼的方式就是准备很多根鱼竿（同时监控多个文件描述符） 当没有鱼上钩的时候 你就去睡觉 当其中一根或者多跟鱼竿上钩了 你就醒过来起竿。 那么这种方式虽然也是属于阻塞IO 但是可以对多个文件描述符同时进行阻塞监听 所以效率较阻塞IO高。 IO多路复用的实现的机制是通过select/poll/epoll
转载
2024-06-07 13:18:34
157阅读
一：文件描述符每一个网络连接其实都对应一个文件描述符二：IO多路复用是什么？IO多路复用类似一个规范和接口，落地实现是由 linux系统的 select -> poll -> epoll，就是说通过一种机制，可以监视多个描述符，一旦某个描述符就绪（一般是读就绪或写就绪），能够通知程序进行相应的读写操作。这种机制的使用需要 select 、 poll 、 epoll 来配合。多个连接共用
转载
2024-06-21 08:15:06
54阅读
目录IO多路复用1、捋顺2、BIO3、NIO4、IO多路复用1、select2、poll3、epoll4、总结1、捋顺IO多路复用：多个网络连接IO复用同一个线程BIO：无法做到，每个网络阻塞在每个线程中NIO：可以做到，自旋，一个线程中自旋遍历所有网络IOEPOLL：可以做到，无需自旋，采用事件监听机制+fd，实现一个线程复用多个网络IO1、多个客户端（socket）连接到redis，此时red
转载
2023-10-28 17:19:58
70阅读
背景 要想完全彻底的搞清楚 epoll 底层原理，我们有必要了解一下整个 IO 的发展历程，计算机内核的每一次的优化升级都是由于其自身的缺点进而发展出来的，从而促使底层系统函数的迭代升级，进而才会促使整个 IT 技术的升级迭代。这里不会讲太细节性的东西，例如：网络通信、CPU 中断等，这个有兴趣的同学可以下来更加细致的去了解，可以参考 epoll 三部曲来一步一步的了解：epoll 本质 从以
转载
2024-05-28 15:12:19
0阅读
