最近使用了一个非常简单易用的方法解决了业务上的一个insert吞吐量的问题，在此总结一下。 首先我们明确一下，insert吞吐量其实并不是指的IPS（insert per second），而是指的RPS（effect rows per second）。其次我们再说一下batch insert，其实顾名思义，就是批量插入。这种优化思想是很基本的，MySQL中最出名的应用就是group co
转载
2024-04-16 12:24:48
33阅读
进行测试的机器包含2个CPU共8核的处理器（这是我手头上能找到最好的机器了）、10K SAS 磁盘（RAID1），使用sysbench 0.4测试单表共100万行记录。我通过网络来运行这个压力测试，并发的客户端从4到4096。这里是 OLTP-只读 吞吐量测试结果：说明：绝大多数的测试结果表明，MariaDB 的吞吐量比 MySQL 高出 10% 左右在 4096 并发客户端时
转载
2023-12-15 21:08:51
133阅读
目录 性能监控和分析性能定义性能分析schema和数据类型优化索引优化查询优化学习要用思维导图，将知识点链接起来，形成知识图谱，知道哪些点，细节去查性能监控和分析性能定义性能如何度量，核心指标： 1.吞吐量 tps，olap数据库偏向吞吐量 2.时延，oltp应用偏向时延低性能分析性能监控
set profiling 1show profile看各个阶段的耗时
看官方文档
转载
2023-12-13 23:28:42
129阅读
什么是性能测试？ 压力测试：强调极端暴力 稳定性测试：在一定压力下，长时间运行的情况 基准测试：在特定条件下的性能测试 负载测试：不同负载下的表现 容量测试：最优容量 吞吐量的指标受到响应时间、服务器软硬件配置、网络状态等多方面因素影响。吞吐量越大，响应时间越短。服务器硬件配置越高，吞吐量越大。网络越差，吞吐量越小。QPS（TPS）：每秒
转载
2024-01-04 17:51:21
85阅读
文章目录1. 优化思路2. 连接——配置优化3. 缓存——架构优化3.1 缓存3.2 主从复制3.2.1 单线程3.2.2 异步与全同步3.2.3 半同步复制3.2.4 多库并行复制3.2.5 异步复制之 GTID 复制3.3 分库分表3.4 高可用方案3.4.1 主从复制3.4.2 NDB Cluster3.4.3 Galera3.4.4 MHA/MMM3.4.5 MGR4. 优化器--SQL
转载
2024-08-20 13:35:37
64阅读
redis-benchmarkRedis自带一个叫redis-benchmark的工具来模拟N个客户端同时发出M个请求影响 Redis 性能的因素有几个因素直接决定 Redis 的性能。它们能够改变基准测试的结果， 所以我们必须注意到它们。一般情况下，Redis 默认参数已经可以提供足够的性能， 不需要调优。网络带宽和延迟通常是最大短板。建议在基准测试之前使用 ping 来检查服务端到客户端的延迟
转载
2023-11-10 21:22:46
168阅读
吞吐量（QTP）吞吐量，是指在一次性能测试过程中网络上传输的数据量的总和----指的是服务端返回给客户端的数据量吞吐率特指Web服务器单位时间内处理的请求数；（Throughput），单位是 “req/s”。或是单位时间内网络上传输的数据量 我们每天的生活中都在用水用电，我只会关心自己的水管是否有水，水压是否稳定，如果我们把水龙头拧到最大，还是一滴一滴的流水。那我们就要愤怒了，直接找房东问明情况
转载
2023-10-05 11:06:32
0阅读
Iperf是一个网络性能测试工具。Iperf可以测试TCP和UDP带宽质量。Iperf可以测量最大TCP带宽，具有多种参数和UDP特性。Iperf可以报告带宽，延迟抖动和数据包丢失。利用Iperf这一特性，可以用来测试一些网络设备如路由器，防火墙，交换机等的性能。 Iperf还有一个图形界面程序叫做Jperf，使用JPerf程序能简化了复杂命令行参数的构造，而且它还保存测试结果,同时实时图形
转载
2023-12-20 20:14:05
39阅读
收集性能测试结果性能测试执行过程中，场景监控的主要任务是收集测试结果，测试结果有事 务响应时间、吞吐量、TPS、服务器硬件性能、JVM使用情况和数据库性能状态 等。Jmeter中通过监听器及其它外置工具来完成测试结果收集工作事务响应时间用户从发出请求到接收完响应之间的总耗时，它由网络传输耗时、服务处理 耗时等多个部分组成。通常以毫秒（ms）作为单位。站在用户角度来说，你可 以将软件性能看作是软件对
转载
2023-10-23 10:35:29
223阅读
试试SQLServer 2014的内存优化表SQL Server2014存储引擎：行存储引擎，列存储引擎，内存引擎SQL Server 2014中的内存引擎(代号为Hekaton)将OLTP提升到了新的高度。现在，存储引擎已整合进当前的数据库管理系统，而使用先进内存技术来支持大规模OLTP工作负载。就算如此，要利用此新功能，数据库必须包含“内存优化”文件组和表即所配置的文件组和表使用Hekaton
我们每天的生活中都在用水用电，我只会关心自己的水管是否有水，水压是否稳定，如果我们把水龙头拧到最大，还是一滴一滴的流水。那我们就要愤怒了，直接找房东问明情况。我们从来没想过去找自来水公司。我们每天都会上网，网速很慢，看个电影很卡，需要等很久才缓冲一个画面，我们打开网页很慢，IE状态条一直50%，那我...
转载
2021-04-22 16:49:40
783阅读
一、主要指标1、CPM 每分钟请求数cpm 全称 call per minutes，是吞吐量(Throughput)指标。下图是拼接的全局、服务、实例和接口的吞吐量及平均吞吐量。 第一条185cpm=185/60=3.08个请求/秒。 2、SLA 服务等级协议 SLA 全称 Service-Level Agreement，直译为 “服务等级协议”，用来表示提供服务的水平。 在I
转载
2024-05-01 23:52:12
315阅读
Tomcat的吞吐量大小取决Io的很大的因素，同时可以通过调整启动项目中的配置，来做一些性能的提升。重要的三个配置项：maxConnections、maxThreads、acceptCount。首先来看下maxConnections最连接数、maxThreads最大线程数、acceptCount等待线程数server:
tomcat:
uri-encoding: UTF-8
#
转载
2023-10-26 20:32:48
416阅读
【前言】 在了解 垃圾回收器 之前，首先得了解一下垃圾回收器的几个名词。吞吐量 CPU 用于运行用户代码的时间与 CPU 总消耗时间的比值。比如说虚拟机总运行了 100 分钟，用户代码 时间 99 分钟，垃圾回收 时间 1 分钟，那么吞吐量就是 99%。吞吐量 = 运行用户代码时间/（运行用户代码时间 + 垃圾回收时间）停顿时间 停顿时间 指垃圾回收器正在运行时，应用程序 的 暂停时间。对于 独占
转载
2023-12-02 20:55:22
114阅读
如何自测接口的QPS、最大吞吐量什么是QPS为什么要知道接口QPS实操接下来进行Jmeter压测 什么是QPSQPS = req/sec = 请求数/秒 原理:每天80%的访问集中在20%的时间里，这20%时间叫做峰值时间 公式:( 总PV数 * 80% ) / ( 每天秒数 * 20% ) = 峰值时间每秒请求数>(QPS) 机器:峰值时间每秒QPS / 单台机器的QPS = 需要的机器
转载
2023-07-04 23:16:36
368阅读
计算机的吞吐量： 计算机系统的吞吐量是指流入,处理和流出系统的信息的速率.它取决于信息能够多快地输入内存,CPU能够多快地取指令,数据能够多快地从内存取出或存入,以及所得结果能够多快地从内存送给一台外围设备.这些步骤中的每一步都关系到主存,因此,系统吞吐量主要取决于主存的存取周期. 由于上述原因,采用双端口存储器可以增加主存的有效速度. 那么，下面的简述就说得不是很准确啦，只说吞的
转载
2024-04-07 08:51:37
140阅读
最近在项目中遇到了一个比较奇怪的问题，在IDEA本地起项目测试的吞吐量竟然高于在服务上起jar包（源码及所有依赖的jar打包至一个jar包中）的吞吐量，服务器的内存及cpu利用率较低，这显然是不正常的，于是进行了一系列尝试，最终通过将源码与依赖的第三方jar分开解决了问题。两种打包方式效率对比如下：方式一：源码及所有依赖的jar打包至一个jar包中 target目录结构： Jar包目录结
转载
2024-03-16 00:26:05
141阅读
概述：本文简单概述了为提高应用程序吞吐量的一般做法，这些做法仅涉及总体部署方面。 概览图 应用服务器一般的，我们通过微软的网络负载平衡技术实现扩展，你可以架设32台以内的应用服务器，当然实际上你可以架设更多（微软有详细的资料介绍如何架设的更多）。对于一般的ERP应用来说，32台服务器已经足够足够使用了，因为性能的瓶颈实际上在数据库上。 使用微软网络负载平衡技术的好处：
转载
2024-04-17 21:09:45
75阅读
目的大家说到kafka，肯定就会想到“快”和“高吞吐量”，特别是吞吐量这一点，好像目标就没有超越kafka的。 本文就是解释了kafka怎么做到“快”和“高吞吐量”。producerproducer客户端有4个跟吞吐量相关的配置：max.in.flight.requests.per.connection，每个连接没有收到响应的最大请求数，默认5。未确认的请求数达到该配置，那么对应的连接就不能再用来
转载
2024-02-25 07:33:44
102阅读
Kafka是大数据领域无处不在的消息中间件，目前广泛使用在企业内部的实时数据管道，并帮助企业构建自己的流计算应用程序。Kafka虽然是基于磁盘做的数据存储，但却具有高性能、高吞吐、低延时的特点，其吞吐量动辄几万、几十上百万。但是很多使用过Kafka的人,经常会被问到这样一个问题,Kafka为什么速度快,吞吐量大；大部分被问的人都是一下子就懵了，或者是只知道一些简单的点，本文就简单的介绍一下Kafk
转载
2024-03-04 22:13:09
87阅读
