全网最全性能测试总结，分析性能测试问题+性能调优方案..._性能测试分析-程序员宅基地
技术标签： jmeter性能测试 压力测试 性能测试 软件测试 软件测试工程师
目录：导读
前言
性能分析和优化一直是技术领域热门的一个话题，无论是三高（高性能、高可用、高稳定），还是CAP（数据一致性、服务可用性、分区容错性），都强调了服务的性能和可用。
那么在工作中，该如何去测试并进行性能优化呢？
常见的性能问题与原因
网络带宽：
网络对性能的影响不言而喻。如果带宽不足，单位时间内的请求过多，就会导致数据包的传输延迟较大。
如果网络不稳定，也会导致RT的曲线抖动较为剧烈，产生毛刺甚至丢包，这个时候P90/P99的数值也可能变大。因此稳定和足够的网络带宽，对系统的性能来说是很重要的。
负载均衡：
现在的SLB层已经优化的足够好，但如果负载均衡出现问题，可能会导致流量分发不均匀，导致部分应用节点流量异常，健康检查不通过从而被踢下线。
甚至服务注册重试失败或者弹性扩容不够及时，还会导致可用的节点承受了较多的请求最终导致雪崩效应。
安全策略：
现在的软件系统，常见的安全防护策略有ddos高防以及WAF，一般都是部署在SLB和流量网关之间或者更上层。
安全防护策略常见的场景有异常检测、输入验证、安全补丁、状态管理以及基于规则和异常的保护功能。
这些安全策略能够有效的保护系统不受到一些恶意的攻击和侵入，但这些策略生效也是需要耗费时间的。
流量网关：
上面提到的几个部分都可以看做是互联网时代的基础通用层，而网关是伴随着微服务和容器化出现的，作为用户流量的系统入口，网关也承担了较多的功能。
比如：日志、身份鉴权、灰度发布、限流熔断、可观测性metrics、应用限流apm tracing
上述的功能，无论是身份鉴权还是可观测性的metrics的实现，都需要耗费一定时间。特别是对于请求的RT比较敏感的业务，对流量网关功能的耗时要求更为严格。
Web应用层：
这几年前后端分离的系统设计越来越多，web层更多的负责页面的渲染展示和部分讨好用户的交互设计。
如何让用户更快的感知到他所感兴趣的东西，这个时候CDN和缓存就派上用场了。
利用CDN和缓存的特性“就近加载”，让用户感知到的性能更快，也是性能优化领域很重要的一点。
APP应用层：
前面讲了web层负责页面渲染展示和友好的交互，那App应用层（即我们常说的后端服务）则更多的负责逻辑计算。逻辑计算是很吃资源的，当然和它的一些参数配置以及技术架构也有较大关联。
常见的影响后端服务性能的因素如下：
硬件资源：如CPU/Memory；
参数配置：如Activethreads/TimeOut；
缓存配置：缓存中的大Key及缓存命中率；
并行计算：请求下游依赖是串行还是并行？
代码逻辑：最经典的例子——for循环无线套娃；
日志处理：特别是异常日志的处理以及生产日志级别；
处理机制：同步还是异步？如果是异步，MQ容量及消费能力如何？
数据存储层：
数据存储层我们通常理解为数据库。数据库层面影响性能的因素应该是最常见也是最多的。
比如：
锁：不合理的锁使用导致的请求等待；
索引：未加索引或索引未生效导致慢SQL；
数据量：表数据量过大导致的读写变慢等问题；
针对业务扩张以及数据量变大的问题，常见的优化策略有分表、数据库垂直拆分、读写分离等；
压测不是发现问题的唯一手段
回到性能定位分析和优化的话题上，关于性能优化，如下三点是必须铭记的。
1、性能优化的目标
在保持和降低系统99%RT的前提下，不断提高系统吞吐量，提高流量高峰时期的服务可用性。
2、性能优化的挑战
日益增长的用户量（带来访问量的提升，大数据量的存储和处理）；
越来越多样的业务（业务的不断迭代和发展，会使其复杂性指数提升）；
越来越复杂的系统（为了支撑业务迭代发展，系统架构会变得很复杂）；
3、性能优化的路径
降低响应时间；
提高系统吞吐量；
提高服务可用性；
PS：三者关系在某些场景下互相矛盾冲突，不可兼得！
基于上述关于性能优化的几点内容，结合我个人的实践经验和看法，性能定位和分析可以分为：
熟悉业务逻辑，了解系统架构；
掌握技术原理，熟知问题定位和分析优化的软件工程方法论；
不断实践踩坑，总结归纳性能验证、定位分析的方法和经验；
熟练使用性能测试、监控追踪、问题分析和优化的各种工具并擅加利用；
性能优化运行的更快更稳定
分层优化：
请求的处理过程要经过多个链路环节，除了优化耗时最长难度和成本较低的环节之外，在每个环节都进行一定优化，则对整体性能的提升有很大帮助。下面是流量高峰时的一些优化或者说应对案例：
数据库：
扩容：DB是有状态服务，计算层便于扩容，将DB节点放到容器中，有需要扩容；
灾备：对于大流量读场景可通过流量切换方式，将部分流量迁移到备份集群分流；
巡检：慢SQL是常见的问题，可通过自动监控和历史数据分析，提供辅助式决策；
应用层(计算层)：
限流：控制访问应用的流量在系统承载范围内
在业务请求入口（网关）限流，避免内部互相调用放大流量；
限流是个演进状态，从连接池、IP、指定SQL到更细的层级粒度做限流；
每个调用层都做限流，每个应用先保证自己可用，对其他依赖调用要做到“零信任”；
降级：强依赖通过熔断做紧急处理，弱依赖提前主动降级
主动降级：提前进行风险识别，然后针对性的降级，可降低已知的风险；
紧急降级：假设出现重大的问题，才需要决策是否启用的方案（风险较大）；
预案平台：预案平台的目的是留痕，方便后续把限流降级等配置恢复回来；
熔断：熔断下游强依赖的服务
双十一零点的前半小时， 做一个动态推送，把日志关掉；
真正流量来的时候，留一台机器来观察错误和异常的日志；
隔离：核心和非核心业务做隔离
| 下面是我整理的2023年最全的软件测试工程师学习知识架构体系图 |
一、Python编程入门到精通
二、接口自动化项目实战
三、Web自动化项目实战
四、App自动化项目实战
五、一线大厂简历
六、测试开发DevOps体系
七、常用自动化测试工具
八、JMeter性能测试
九、总结（尾部小惊喜）
每一次的努力都不会白费，终究会有回报。只要不放弃，坚持到底，你就能看到自己所期待的美好未来。因为奋斗是人生最珍贵的经历，它能让你变得更加坚强、勇敢和有智慧。只有不停地前行，才能走出属于自己的辉煌人生！
每一次的挫折和失败，都是你成长的机会。不要轻易放弃，坚持下去，你会发现自己变得越来越强大，最终实现自己的梦想。
只要你有梦想，就有无限的可能性。不要害怕失败，因为失败不是终点，而是成功的起点。勇往直前，不断尝试，你会发现自己比想象中更强大。坚持不懈，相信自己，你必将创造属于自己的辉煌人生！
智能推荐
HBase数据大批量导入方式总结和对比_hbase 大数据量导入-程序员宅基地
文章浏览阅读3.4k次，点赞4次，收藏19次。HBase数据导入1. 背景在实际生产中，海量数据一般都不是直接存储在HBase中，这时候就需要一个数据导入到HBase的步骤上一篇博客讲述了可以通过java api的方式或者shell 客户端方式导入或者创建数据，但这对于实际生产中海量数据导入来说，速度和效率都太慢了，所以我们需要使用其他方式来解决海量输入导入到HBase的问题利用HBase底层文件是HFile形式存储再HDFS中，所以如果能够直接生成HFile的话，这时候再让HBase从HFile中读取数据，就会快很多。2. 批量数据导入_hbase 大数据量导入
Qt 串口通信之使用16进制发送数据的转换方式_qt串口发送16进制数据-程序员宅基地
文章浏览阅读1.7k次，点赞2次，收藏18次。16进制QString转成16进制QByteArray一 概述 有时候在做上位机串口通讯时，经常需要将字符串转成16进制的形式作为发送，借此分析记录一下。二 需求分析//假设需要转换的字符：如下QString str = "abcdef1234";//需求转换成 0xab,0xcd,0xef,0x12,0x34 由上图分析得出，很明显我们只需要拆分字符串然后再重新合并就ok啦，知道了解决方法，接下来就是上代码。三 编写代码方法1：/*******************_qt串口发送16进制数据
multipartfile上传文件 大小限制_multipartfile 大小限制-程序员宅基地
文章浏览阅读1.4w次，点赞7次，收藏15次。关于文件上传大小 主要看一个错误org.apache.tomcat.util.http.fileupload.impl.SizeLimitExceededException: the request was rejected because its size (59500387) exceeds the configured maximum (10485760) at org.apache.tomcat.util.http.fileupload.impl.FileItemIteratorImpl.ini_multipartfile 大小限制
基于python的信用卡评分模型_python 信用 评分卡模型-程序员宅基地
文章浏览阅读4.4w次，点赞45次，收藏418次。基于python的信用卡评分模型1. 项目背景介绍1.1 信用风险和评分卡模型的基本概念 信用风险指的是交易对手未能履行约定合同中的义务造成经济损失的风险，即受信人不能履行还本付息的责任而使授信人的预期收益与实际收益发生偏离的可能性，它是金融风险的主要类型。 借贷场景中的评分卡是一种以分数的形式来衡量风险几率的一种手段，也是对未来一段时间内违约、逾期、失联概率的预测。一般来说..._python 信用 评分卡模型
linux 下 tcpdump 详解 前篇（libpcap库源码分析）_libcap 源码-程序员宅基地
文章浏览阅读1.7k次，点赞3次，收藏22次。一 概述用简单的话来定义tcpdump，就是：dump the traffic on a network，根据使用者的定义对网络上的数据包进行截获的包分析工具。 至于tcpdump参数如何使用，这不是本章讨论的重点。liunx系统抓包工具，毫无疑问就是tcpdump。而windows的抓包工具，wireshark也是一款主流的抓包工具。wireshark 使用了winpcap库。tcpdump..._libcap 源码
http://mirrors.aliyun.com/epel/6/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 22 --程序员宅基地
文章浏览阅读6.5k次，点赞14次，收藏11次。http://mirrors.aliyun.com/epel/6/x86_64/repodata/repomd.xml: [Errno 14] PYCURL ERROR 22 - “The requested URL returned error: 404 Not Found”Trying other mirror.Error: Cannot retrieve repository metadata (repomd.xml) for repository: epel. Please verify its_/epel/6/x86_64/repodata/repomd.xml: [errno 14] pycurl error 22 - "the reques
随便推点
悼念512汶川大地震遇难同胞——珍惜现在，感恩生活(多重背包)-程序员宅基地
文章浏览阅读105次。急！灾区的食物依然短缺！为了挽救灾区同胞的生命，心系灾区同胞的你准备自己采购一些粮食支援灾区，现在假设你一共有资金n元，而市场有m种大米，每种大米都是袋装产品，其价格不等，并且只能整袋购买。请问：你用有限的资金最多能采购多少公斤粮食呢？后记：人生是一个充满了变数的生命过程，天灾、人祸、病痛是我们生命历程中不可预知的威胁。月有阴晴圆缺，人有旦夕祸福，未来对于我们而言是一个未知数。那么，我们要做的就应该是珍惜现在，感恩生活——感谢父母，他们给予我们生命，抚养我们成人；感谢老师，他们授给我们知识，.
Android源码设计模式探索与实战【面向对象六大基本原则】_android源码设计模式第2版 csdn-程序员宅基地
文章浏览阅读2.9k次，点赞43次，收藏40次。IT行业，一直讲一句话，拼到最后都拼的是“内功”，而内功往往就是指我们处理问题的思路、经验、想法，而对于开发者来说，甚至对于产品也一样，都离不开一个“宝典”，就是设计模式。今天我们一起借助Android源码去探索一下设计的六大基本原则。同时结合我工作经验中的两个例子，来总结实践一下。1.背景&定义定义：设计模式是一套被反复使用的、多数人知晓的、经过分类编目的、代码设计经验的总结。使用设计模式是为了重用代码、让代码更容易被他人理解、保证代码可靠性。理解：设计模式是什么？设计模式（Desi._android源码设计模式第2版 csdn
这台计算机似乎没有安装操作系统_前沿科技 | 浙江大学科学家联合之江实验室成功研制全球神经元规模最大的类脑计算机...-程序员宅基地
文章浏览阅读172次。1.6米高的三个标准机柜并排而立，黑色的外壳给人酷酷的感觉，红色的信号灯不停地闪烁，靠得近些似乎能听到里面脉冲信号飞速奔跑的声音。近日，浙江大学科学家团队联合之江实验室共同研制成功了我国首台基于自主知识产权类脑芯片的类脑计算机(Darwin Mouse)。这台类脑计算机包含792颗浙江大学研制的达尔文2代类脑芯片，支持1.2亿脉冲神经元、近千亿神经突触，与小鼠大脑神经元数量规模相当，典型..._浙江大学 类脑 方向
实现RTSP摄像机进行网页直播和微信直播的技术方案：EasyNVR版本免费更新方法_easynvr免费版-程序员宅基地
文章浏览阅读2.7k次。问题背景前文我们提过为保障服务器正常稳定运作，EasyNVR有专业的运维（售前支撑、商务咨询、售后维护）团队，随时对客户各种突发情况快速响应处理，保证互联网直播的顺利进行。这部分工作就包括技术问题咨询、需求分析、方案制定、版本更新、功能提升等，随着用户基数的增加，运维过程中或多或少存在一些回复延迟，主要包括以下几个方面：EasyNVR的用户越来越多，技术人员一一对应解答效率不高；随着Eas..._easynvr免费版
P1541 [NOIP2010 提高组] 乌龟棋 题解_乌龟棋2010-程序员宅基地
文章浏览阅读401次，点赞3次，收藏4次。更好的阅读体验蒟蒻的第一篇题解P1541 [NOIP2010 提高组] 乌龟棋简单的背包 首先确定状态，dp[a][b][c][d]用来存储使用a张爬行卡片1，b张爬行卡片2，c张爬行卡片3，d张爬行卡片4时的最大得分。 我们需要开一个桶的数组t存4种牌的个数，以便于暴力。 dp数组初始化。很显然，四种卡片都用0张时，在起点，分数为score[1] 即： dp[0][0][0][0]=score[1]; 状态转移。DP 4种卡片的个数，状态转移方程为_乌龟棋2010
计算机网络 | 划分子网_计算机网络子网划分-程序员宅基地
文章浏览阅读5.5k次，点赞11次，收藏69次。划分子网概念先知了解 什么是子网？了解 为什么要划分子网？划分子网的好处/优点是什么？介绍 子网掩码总结 子网掩码记住 IP 地址的自然分类问题求解一个网络，主机号有x位，则这个网络可以分配给主机的IP地址有多少个？子网划分实例问题1题目分析题目解题方法参考内容概念先知了解 什么是子网？子网或子网络是网络内部的网络。子网使网络更高效。通过子网划分，网络流量传播距离更短，无需通过不必要的路由器即可到达目的地。了解 为什么要划分子网？划分子网的好处/优点是什么？1.减少广播带来的负面影响2.节_计算机网络子网划分