推荐阅读:

  • 这套Github上40K+star学习笔记,可以帮你搞定95%以上的Java面试

  • 毫不夸张的说,这份SpringBoot学习指南能解决你遇到的98%的问题

  • 给跪了!这套万人期待的 SQL 成神之路PDF,终于开源了

从OpenSearch中检索出数据,然后各种填充组装数据,最后返回。

逻辑看似很简单,当初我也是这样认为的,于是预估5天完成,最后前前后后开发、联调、改bug直到上线差不多花了10天(当然这10天并不是只做这一件事情)。

复杂在于影响返回结构的因素很多,排除问题需要检查配置、检查数据库、检查缓存、检查OpenSearch、检查代码。

言归正传,不管逻辑有多复杂,都不是你逃避问题的接口,更不是你不去优化的理由,这不是本文的重点,优化过程才是。

要求,给APP提供的接口一般要求响应时间在100ms以内。

第一次压测

惨不忍睹,平均响应时间150ms,而且在这次压测过程中还发现其它的问题,后台报错,经查是OpenSearch每秒查询次数限制

优化代码与配置

1、修改OpenSearch配置,并且将压测环境中的OpenSearch连接地址改为内网地址。2、将代码中循环查询缓存的地方改为一次性批量查询返回。3、和相关同学确认后去掉项目中无用的代码。

第二次压测

虽然优化了代码,修改了配置,但是情况更糟糕了,而且还改出了新的问题。当时,反复检查了代码,确定查询缓存的次数已经是最少了,而且连接线程池相关参数也调到一个相对较大且合理的值了。如果,再压测还是无法达到要求的话,只有出最后一招了:缓存结果集。即,以用户ID和用户搜索的关键词为key,查询的结果为value,缓存5分钟。

第三次压测

总算符合要求了,并发60的时候响应时间达到32ms,而我又发现了新的优化点。

接口中居然还有查数据库的操作,这可不能忍,排查之后去掉了一些不必要的依赖。

成长

学会了使用RedisTemplate的executePipelined进行redis批量查询

针对本次优化的总结

1、一定要绝对避免循环查数据库和缓存(PS:循环里面就不能有查询缓存,更不能有查询数据库的操作,因为循环的次数没法控制);

2、对于API接口的话,一般都是直接查缓存的,没有查数据库的;

3、多用批量查询,少用单条查询,尽量一次查出来;

4、对于使用阿里云,要留意一下相应产品的配置,该花的钱还是得花,同时,千万要记得正式环境中使用相应产品的内网地址;

5、注意连接池大小(包括数据库连接池、Redis缓存连接池、线程池);

6、压测的机器上不要部署其它的服务,只跑待压测的服务,避免受其它项目影响;对于线上环境,最好一台机器上只部署一个重要的服务;

7、没有用的以及被注释掉的代码,没有用的依赖最好及时清理掉;

8、集群自不用说;

9、一些监控类的工具工具可以帮助我们更好的定位问题,比如链路跟踪,这次项目中使用了PinPoint;

10、如果技术上优化的空间已经非常小了,可以试着从业务上着手,用实际的数据说话,可以从日常的访问量,历史访问量数据来说服测试;

11、每一次代码改动都有可能引入新的问题,因此,每次修改代码后都要回归测试一下(PS:每次修改完以后,我都会用几组不同的关键词搜索,然后比对修改前和修改后返回的数据是否一致,这个时候postman,以及Beyond compare就派上用场了);

总结

至此,文章终于到了尾声。总结一下,我们谈论了简历制作过程中需要注意的以下三个部分,并分别给出了一些建议:

  1. 技术能力:先写岗位所需能力,再写加分能力,不要写无关能力;
  2. 项目经历:只写明星项目,描述遵循 STAR 法则;
  3. 简历印象:简历遵循三大原则:清晰,简短,必要,要有的放矢,不要海投;

以及最后为大家准备的福利时间:简历模板+Java面试题+热门技术系列教程视频
戳这里免费领取文中资料

[外链图片转存中…(img-S7avOauX-1623738903763)]

[外链图片转存中…(img-nDQxMdQQ-1623738903764)]

最近被安排搞搜索接口优化,压测了4次,才勉强达到要求~相关推荐

  1. 性能服务器图片介绍大图,服务端图片图片上传接口性能压测总结

    服务端图片上传接口性能压测总结 一.性能测试时需要关注点 用户操作的相应时间 服务器资源使用情况是否合理 应用服务器和数据库资源使用是否合理 系统能否实现扩展 系统最多支持多少用户访问.系统最大业务处 ...

  2. 软件测试 | Jmeter 性能测试工具的实战应用《接口性能压测》的操作步骤详解

    嘿.大家好,我是4U: 接口测试可以提前发现软件bug,有效地降低软件的开发成本,而接口性能压测也可以达到同样的效果.如果形容LR是大炮,那么JM则是一把狙击步枪. 那么今天我们来讲讲接口性能压测. ...

  3. Jmeter压测具有业务关联性的接口--流程压测

    问题:除了单接口压测之外,很多业务需要组合压测,即整个业务串联压测,原因是单接口压测符合业务标准后,往往整个业务下来性能还是打不到预期的业务标准,因此,在整个业务交易过程中,每个接口的性能指标,具有相 ...

  4. 教程:使用Jmeter对带token的接口进行压测

    最近在研究并发,用到了Jmeter对接口进行压力测试,记录下使用过程 一. 配置/bin下的Jmeter.properties,打开以下两项配置,一个是默认的编码,一个是默认的语言 二. 打开jmet ...

  5. 压测接口线程数设置_ZAT掌门性能压测巡检系统实战和落地

    项目背景 随着业务拓展,对于接口性能的要求也在上升,各部门也开始针对部分慢接口进行优化,从测试角度针对这些优化需求进行测试时不仅要保证对应接口的功能正常使用同时也要验证接口优化成果.在日常的开发工作中 ...

  6. 登录接口压测响应慢频繁GC问题排查

    登录接口压测响应慢频繁GC问题排查 2020.5.22 最近项目组针对几个较重要的接口进行了几十个小时的压测,发现登录接口的压测呈现了一种响应慢且越来越慢的趋势,CPU 也居高不下 压测情况 查看CP ...

  7. 微信公众号文章搜索接口9大详解

    微信公众号作为一个重要的自媒体平台,越来越受到人们的关注.而对于那些想要提高自己公众号文章点击率的人来说,微信公众号文章搜索接口是一个不可或缺的工具.本文将从以下9个方面详细介绍微信公众号文章搜索接口 ...

  8. Jemeter对HTTP接口压测(二)

    这里简单的介绍下使用jmeter进行http接口的压测方法 1.创建线程组 添加一线程组(即用户组:一个线程模拟一个用户行为,如果要模拟多个用户,则通过设置多线程来实现) 2.创建HTTP请求 因为是 ...

  9. 蚂蚁集团技术专家山丘:性能优化常见压测模型及优缺点

    陈显铭(山丘) 读完需要 6 分钟 速读仅需 2 分钟 陈显铭,花名山丘,就职于蚂蚁集团,对分布式应用架构.服务化.性能优化等有深入的理解.参与支付宝支付链路核心系统,设计.调优应用系统关键能力, 高 ...

最新文章

  1. AIX系统管理--关于unsuccessful login attempts和account_locked
  2. 数据库------求职必看
  3. 十九、抓包利器Charles的使用
  4. 使用T-SQL语句操作数据表-删除数据
  5. python测速程序_Python大数据分析学习.测试程序执行速度
  6. 做软件也是要有点追求的
  7. 超定方程组最小二乘解法——正规方程组求解(matlab代码)
  8. loadrunner监控linux内存,Loadrunner11监控LINUX服务器
  9. 大数据软件在高校领域的应用探索—智慧高校解决方案分享
  10. CentOS7中安装五笔输入法
  11. 堪萨斯大学计算机硕士,美国堪萨斯大学计算机工程研究生申请要求
  12. TZOJ5855: 数据结构实验:最短路(SPFA)
  13. Excel常用小技巧
  14. Hive查询系列之初相识
  15. 代码实现raft共识算法,并进行Demo展示
  16. 计算机报名照片在线修图,2020河北省考报名照片处理工具及使用说明
  17. 效率提升:使用AppleScript模拟鼠标键盘操作制作自动化工具
  18. Linux Ubuntu 22.04实现打开、最小化时呈现魔灯效果
  19. 移动信息化安全解决方案VMI、MDM剖析
  20. JAVA如何实现手机群控_群控电梯调度算法

热门文章

  1. 2021-2025年中国丁酸衍生物行业市场供需与战略研究报告
  2. js金额格式化最简单方法 JS对货币格式化,js钱三位一隔,javascript货币格式化
  3. 如何判断stdin的数据类型
  4. 曾估值 45 亿美元!Apache Kafka 商业化公司 Confluent 计划上市:已申请 IPO
  5. Java面试高频题:Spring Boot+Sentinel+Nacos高并发已撸完
  6. 与 Brian Kernighan 一起回忆 Unix 的诞生!
  7. 支持百万级TPS,Kafka是怎么做到的?
  8. 上线两天用户 10W+,这款 AI 知识图谱小程序有多牛?
  9. 每个创始人都需要了解的来自 Y Combinator 的 13 个见解
  10. 打破数据孤岛难题,翼方健数解码隐私安全计算技术