redis特点1）纯内存访问。数据存放在内存中，内存的响应时间大约是100纳秒，这是Redis每秒万亿级别访问的重要基础。（2）非阻塞I/O，Redis采用epoll做为I/O多路复用技术的实现，再加上Redis自身的事件处理模型将epoll中的连接，读写，关闭都转换为了事件，不在I/O上浪费过多的时间。（3）单线程避免了线程切换和竞态产生的消耗。（4）Redis采用单线程模型，每条命令执行如果占
转载
2023-07-08 15:10:00
236阅读
# 如何在Yarn中更改最大并发数
## 1. 流程概述
首先，我们需要在Yarn配置文件中更改最大并发数。这个过程可以分为以下几个步骤：
```mermaid
journey
title Yarn更改最大并发数流程
section 小白开发者
开发者->Yarn配置文件: 打开Yarn配置文件
开发者->Yarn配置文件: 更改最大并发数
原创
2024-05-05 05:23:07
57阅读
redis之所以能解决高并发的原因是它可以直接访问内存，而以往我们用的是数据库(硬盘),提高了访问效率,解决了数据库服务器压力。为什么redis的地位越来越高，我们为何不选择memcache，这是因为memcache只能存储字符串，而redis存储类型很丰富（例如有字符串、LIST、SET等），memcache每个值最大只能存储1M,存储资源非常有限,十分消耗内存资源,而redis可以存储1G,最
转载
2023-05-29 10:28:55
176阅读
场景描述spark on yarn 提交多个任务后，只有一个在 RUNNING 状态执行，其余任务都是 ACCEEPTED 状态，而且集群有好多资源没有被使用。让 yarn 同时执行多个任务，可以提高集群资源的利用效率，也能提高任务的执行效率。实现方法修改 yarn 集群的配置。${HADOOP_HOME}/etc/hadoop/capacity-scheduler.xml<property
转载
2023-10-13 22:31:28
750阅读
MQ概述MQ全称Message queue（消息队列）,是在消息的传输过程中保存消息的容器。多用于分布式系统 之间进行通信。MQ的优势1、应用解耦MQ相当于一个中介，生产和消费两方都是通过MQ交互的，这样可以实现程序解耦合。2、任务异步处理将不需要同步处理的并且耗时长的操作由消息队列通知消息接收方进行异步处理。提高了应用程序的响应时间。3、削峰填谷如订单系统，在下单的时候就会往数据库写数据。但是数
转载
2024-03-28 12:21:54
146阅读
内容： linux服务端最大并发数问题分析问题：单机最大支持多少并发连接？一条连接在linux中是如何唯一标识的？靠的是一个五元组，一个五元组可以唯一标记一个网络连接问题分析方向：单机是作为客户端还是服务端？一、作为服务端：理论计算：那么对于服务器来说，服务端唯一五元组数最大是多少呢？
很多人的第一念头就是大约是65535，因为觉得当前Linux的端口号是2字节大小的short类型，
总计2^1
转载
2023-12-01 10:27:03
140阅读
高效、稳定安全的特性，被广泛应用于计算机技术的各个领域。现在，Apache凭借其庞大的用户数，已成为用户数排名第一的web服务器。 尽管如此，在实际的生产环境中，我们仍然不可能直接使用默认配置的Apache来充当服务器。毕竟，为了更充分合理地利用Apache服务器，我们都应该根据自己的实际需要对Apache的默认配置作出一些必要的调整。而针对Apache的优化配置过程中，修改Apache的最大并发
转载
2024-08-02 15:55:09
79阅读
这里我主要是想澄清一些基本概念，主要是关于网页制作及前端优化的，网上看到过一些关于类似于“http连接数”优化的文章，不过感觉存在一些概念性的错误，其实打开网页时http最大连接数是浏览器限制的，如ie6在http1.0下是4个，http1.1下是2个；ie8 在http1.0下是6个，http1.1下也是6个，而不是图片越多或引用的外部文件越多打开的连接数就越多，只能说请求次数会增加，http协
转载
2023-09-15 17:12:52
339阅读
一、多张gpu的卡上使用keras有多张gpu卡时，推荐使用tensorflow 作为后端。使用多张gpu运行model，可以分为两种情况，一是数据并行，二是设备并行。二、数据并行数据并行将目标模型在多个设备上各复制一份，并使用每个设备上的复制品处理整个数据集的不同部分数据。利用multi_gpu_model实现keras.utils.multi_gpu_model(model, gpus=Non
并发是指在一个时间段内有多个进程在执行。 并行指的是在同一时刻有多个进程在同时执行。 如果是在只有一个CPU的情况下，是无法实现并行的，因为同一时刻只能有一个进程被调度执行，如果此时同时要执行其他进程则必须上下文切换，这种只能称之为并发，而如
转载
2024-10-22 09:39:04
40阅读
一、并发数1.新建线程组，Number of threads:30 Ramp-up period:1 Loop Count :勾选forever 表示：平均每秒有30个用户登录，不勾选forever表示只执行一次。2.新建Http请求-登录脚本http协议、接口路径、入参、请求头、Http默认值、断言3.添加监听器，如：查看结果树、聚合报告、资源监控等等。4.测试结果分析(
转载
2024-10-19 10:00:46
180阅读
纯python脚本模拟多用户并发的劣势1.据Threading其实是假并发 2.线程开销大，可能因本机cpu限制无法拉起大量线程什么是locust？locust是一个简单易用的分布式负载测试工具，主要用来对网站进行负载压力测试。locust使用python语言开发，测试资源消耗远远小于java语言开发的jmeter。且其支持分布式部署测试，能够轻松模拟百万级用户并发测试。locust优缺点优点：
概述之前对“高性能、高可用、高并发”，只知其名不知其意，直到在知乎上看到redis系列文章，才豁然开朗，对redis的三高可以这么理解。说明高性能，指的是查询快。
redis是c语言实现，与其他语言相比，在实现语言层面性能高；redis是内存数据库，而传统的关系型数据库是磁盘文件读写，所以redis读写快；单线程，无上下文切换损耗，也不需要线程间同步，在单核cpu上，性能高，如果服务器是多核
转载
2023-07-07 11:03:01
170阅读
kill -HUP pid 重启nginx./nginx -s reload/stop 重启/停止nginxselect/poll/epoll/kqueue在24G内存的机器上，处理的并发请求数达到过200万ulimit -n 一个进程所能够打开的fd的最大数基本的web服务器，事件通常有三种类型，网络事件、信号、定时器ginx通过设置worker_connectons来设置每个进程支持的最大连接
转载
2024-03-24 10:50:01
352阅读
技术文章分享、视频教程分享、项目源码分享，分享得积分可提 OpenResty解决的是高并发的痛点。现在服务的后台大部分是java写的，但是用java写出稳定的高并发服务是很复杂的一件事，首先是服务器的选择，web服务器有几个选型，tomcat，apache,weblogic,还有商用webphere. 1、tomcat官方宣称的并发量是1000，厉害点的做点参数调优，也不过3000并发,如果要开发
转载
2024-04-29 14:05:23
199阅读
#运行用户
user nobody;
#启动进程,通常设置成和cpu的数量相等
worker_processes 1;
#全局错误日志及PID文件
#error_log logs/error.log;
#error_log logs/error.log notice;
#error_log logs/error.log info;
#pid logs/nginx.
转载
2024-06-14 23:10:03
89阅读
#运行用户
user nobody;
#启动进程,通常设置成和cpu的数量相等
worker_processes1;
#全局错误日志及PID文件
#error_log logs/error.log;
#error_log logs/error.log notice;
#error_log logs/error.log in
转载
2024-05-07 10:32:54
350阅读
通过事件提供的最底层控制机制，允许我们有效地利用工具箱，适时选择使用其中的单个工具。FreeSWITCH是一个核心交换与混合矩阵，它周围有几十个模块提供各种功能特性。 我们完全控制了所有的即时信息，这些信息组成了所有进出FreeSWITCH的通信包。同时，我们可以在适当的时候调用任何模块中的每个功能。
转载
2024-08-24 06:57:39
638阅读
public final class RedisUtil {
//Redis服务器IP
private static String ADDR = "192.168.0.100";
//Redis的端口号
private static int PORT = 6379;
//访问密码
private static String
转载
2023-07-07 15:54:58
61阅读
Redis是一个key,value的内存数据库，1秒的并发数约为10万.常识： 1.硬盘 （1）寻址 ：毫秒 （2）带宽： M/G 2.内存 （1）寻址： 纳秒 （2）带宽：优于磁盘秒,毫秒，微秒，纳秒Redis采用NIO(多路复用）访问，是一个单线程数据库 Redis的5大基本类型String,List,hash,set ,sorted_set ，是针对value连接客户端redis-cli -
转载
2023-07-04 11:35:06
115阅读
