HBase2.2.4是截止2020-08-03官方最新的Stable版本，因为做了snappy压缩，但是还未升级到生产环境，需要在测试环境先测试压缩效果的同时也需要测试读写性能YCSB-0.17.0压测HBase，这个工具不多介绍了，雅虎开源的专门压测NoSQL数据库的ycsb-0.17.0下载、解压(这个安装包670M，包含了这个工具支持的所有NoSQL数据库测试样例，若不需要其他的，可以自行下
转载
2023-07-13 23:24:44
188阅读
#测试写能力 hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-3.3.1-tests.jar TestDFSIO -write -nrFiles 1 -fileSize 128MB#写速度hadoop
原创
2023-02-02 10:16:53
97阅读
# 持续压测 Hadoop：确保数据处理的效率与稳定性
Hadoop 是一个开源的分布式计算框架，广泛应用于大数据处理与分析。随着数据量的不断增长，确保 Hadoop 集群的性能和稳定性显得尤为重要。而持续压测（Load Testing）则是评估系统在高负载环境下表现的重要方法。本文将探讨如何进行持续压测 Hadoop，包含代码示例，并使用 mermaid 语法展示旅行图和状态图。
## 什么
一、压测流程可参照上篇压测对抗流程二、压测需求需要明确需要压测的环境需要压测的接口，其中包含接口的入参需要明确接口的预计qps需要明确线上机器配置三、压测准备3.1、服务端开发准备：1.根据需要测试的接口，决定需要部署哪些相关依赖服务2.测试接口对应的服务、接口3.相关配置4.相关数据库5.需要的机器整理，其中包含机器的配置，需要几台机器3.2、前端开发准备：1.测试的接口和服务应用2.域名3.需
转载
2024-04-27 22:57:52
153阅读
MySQL压测--参数压测
原创
2018-06-24 00:28:15
2793阅读
直接执行命令yum install httpd-tools通过 命令查看使用详解 ab --help或者man ab使用ab参数选项-n：即requests，用于指定压力测试总共的执行次数（常用）。
-c：即concurrency，用于指定的并发数（常用）。
-t：即timelimit，等待响应的最大时间(单位：秒)。
-b：即windowsize，TCP发送/接收的缓冲大小(单位：字节)。
-p
转载
2024-10-28 12:50:33
64阅读
最近在进行全链路压测，实际负责订单相关接口。降低rt之路总体总结如下：一、引入监控监控引入可以再极大程度上，帮助我们分析压测过程中各阶段耗时，以及耗时的方向。此次压测试件使用监控工具为grafana与jaeger。cat前期有使用，但前期压测内存使用一直80%以上，dump之后查看发现cat线程占用大量内存，去除cat引用之后，内存使用得到明显降低，保持在20-30%之间。二、适当冗余对于订单列表
转载
2024-05-07 14:36:24
144阅读
PTS是一个性能测试工具，可以使用PTS对自身系统性能在阿里云环境里的状况进行整体评估来找出你的系统性能瓶颈从而优化系统，同时你还可以在了解自己的系统性能指标情况下便于未来新增扩容。在使用PTS前你必须得有自己已购的ECS和RDS作为测试机...
PTS是一个性能测试工具，可以使用PTS对自身系统性能在阿里云环境里的状况进行整体评估来找出你的系统性能瓶颈
转载
2024-05-27 22:30:59
173阅读
1.全链路压测是什么？（1）怎么理解压测系统官方理解：基于实际的生产环境，系统环境，模拟海量用户的真实请求，对业务进行整个链路的压力测试，并持续调优的过程。白话理解：枪的测试、盾的测试，测试平台能不能防弹。压测是不断密集的向平台发射子弹，平台能越实时越真实的详细的给用户结果越好。自我认识：压测系统是模拟多用户行为的系统。系统需要处理的用户行为是，从web开发发起请求，到服务层，到数据层，最终将请求
转载
2024-07-23 13:13:35
96阅读
压测流程和总结一，总结1、第一次做压测，一定要先看别人的压测报告（可以知道压测有哪些指标，有哪些压测方案，以及明确压测的目标，还可以弥补监控和压测指标配置缺漏等问题）2、第一次做压测，一定要全方位做好安全评估（最好做到请教或请求各个组件负责人评估和配合压测，尤其是线上压测，系统所依赖的数据库、缓存、其他组件，以及依赖的其他线上接口、资源等压垮会有什么影响，有木有补救、降级措施，混入脏数据是否能清理
转载
2024-03-27 20:02:08
226阅读
前言 Windows环境 简述 静默 ： 脱离UI运⾏JMeter压测，用命令行方式运行性能测试脚本好处：命令运⾏更容易“搞事情”命令格式： jmeter –n –t $jmx_file -l $jtl_file 注释：$jmx_fil(脚本名称) $jtl_file(报告名称)jmx JMeter ...
转载
2021-07-22 19:51:00
1519阅读
2评论
step-1上传接口分析 上传接口源码分析：分析上传文件类型、有无大小限制、存放上传文件服务器 没有源码通过抓包工具，或者Chrome查看框架源代码 ????接口路径/uploadfile，接口请求POST，参数为file step-2Jmeter脚本编写 ????查看网页源代码 step-3执行校验 上传 ...
转载
2021-08-12 17:15:00
1631阅读
2评论
最近因为个人兴趣，和朋友一起开发了一个app。app的架构是后端用的flask，客户端用的flutter。在我们后端和客户端代码都写完之后，我对我的flask接口做了一次压力测试，测试环境是我的本地笔记本电脑，配置是４核８线程，８Ｇ内存，测试使用的工具是siege。１、首先是使用本地运行flask项目，不做任何部署设置 flask run 然后使用压力测试工具，进行压力测试 可以看
转载
2023-10-10 21:27:37
665阅读
一、介绍 flask是使用python语言编写的一个轻量级的web框架，能方便的实现接口自动化测试；有时候测试需要第三方接口，但第三方接口没有提供时，我们可以通过mock接口模拟第三方接口。二、安装 flask的安装简单通过python提供
转载
2024-06-23 13:02:25
84阅读
1.背景使用ab进行压测，发现使用gunicorn后，服务性能反而下降了，这是ab结果：压测命令：$ ab -c 10 -n 1000 -p post.txt -T application/json http://0.0.0.0:5000/b/embedding条件处理每条请求所用时间(均值)90%时间 不用gunicorn9.918ms121 使用gunicorn：work=
转载
2023-11-28 13:23:54
297阅读
Jmeter测试mysql数据库中间件mycat的过程记录。
背景因为博主所负责测试的项目需要数据库有较大的吞吐量，在最近进行了升级，更新了一个数据库中间件 - - mycat。查询了一些资料，了解到这是阿里的一个开源项目，基于mysql，是针对磁盘的读与写，理论上读写速度上会略小于mysql。与组长沟通后，决定在功能测试完成后，对升级后的mycat进行
转载
2023-07-17 18:21:23
36阅读
服务端压测系列：压测步骤一般来说，一次完整的线上压测包括以下7个步骤1.梳理高峰业务场景可以按照一些问题描述模板比如5W2H来梳理业务场景，例如：场景1：2018年11月11日00:00~01:00，共计xx万个用户同时操作xx。场景2：每天xx时间段，xx系统会轮询调用xx服务xxxx次。2.明确压测目标压测目标制定可以2.1、根据业务场景评估2.2、根据历史流量峰值评估TIPS：制定目标时需要
转载
2024-01-29 07:24:10
84阅读
Sysbench的测试主要包括以下几个方面：1、磁盘io性能2、cpu性能3、内存分配及传输速度4、POSIX线程性能5、调度程序性能6、数据库性能(OLTP基准测试).sysbench安装注：我这里选择源码包安装sysbench0.5版本下载软件http://repo.percona.com/apt/pool/main/s/sysbench/wgethttp://repo.percona.com
原创
2018-04-17 15:28:56
10000+阅读
点赞
安装https://github.com/wg/wrkwrk支持大多数类UNIX系统，不支持windows。需要操作系统支持LuaJIT和OpenSSL，不过不用担心，大多数类Unix系统都支持。安装wrk非常简单，只要从github上下载wrk源码，在项目路径下执行make命令即可。当前源码目录就出现了wrk可执行文件git clone https://github.com/wg/wrk
mak
转载
2024-08-01 14:46:58
92阅读
当你想做性能测试的时候，你会选择什么样的测试工具呢？是会选择wrk？jmeter？locust？还是loadrunner呢？今天，笔者将根据自己使用经验，针对jmeter、locust、wrk和loadrunner常用的性能测试工具进行简单介绍和对比。首先，四者基本对比图：由于loadrunner为商业收费模式，对于公司级测试使用而言涉及到授权问题，因此，本文暂不对loadrunner进行详细讨论
转载
2024-03-13 17:18:25
98阅读
