简介:功能决定现在,性能决定未来。欢迎大家围观《云上的移动性能测试平台》, 了解EMAS性能测试平台的能力与规划。

1. 功能决定现在,性能决定未来

性能测试在移动测试领域一直是一个大难题,它最直观的表现是用户在前台使用 App 时的主观体验,然而决定体验优劣的背后,涉及到了许许多多的技术变迁。

  • 当我们习惯于诺基亚时,智能机出现了;当我们学会native开发时,hybrid来了;当各种 hybrid 框架下的巨型应用倾向成熟时,小程序出现在了我们眼前;紧接着直播、iot、ar、vr、人工智能,新的技术与应用场景正在以无法想象的速度向前发展。性能测试技术在快速变化的场景与开发技术面前,面临着巨大的挑战,当我们还在纠结如何测试 a 时,b 就已经出来了。
  • 性能测试本身,有发展日渐成熟的解决方案,如线上性能监控APM、线下性能采集工具;有基于各个应用场景衍生的测试技术,如压力测试、稳定性测试、功耗测试等;也有基于各项性能指标(内存、cpu、电量、流量)而来的各种专项测试能力。

我们致力于打造线上线下一体的性能解决方案,希望能够帮助开发者发现、定位与解决一系列移动端性能问题。本文将着重介绍 EMAS 性能测试平台的能力与规划,还是那句话,功能决定现在,性能决定未来。

2. 云上的性能测试工具

通常我们在进行专项测试(内存、cpu、电量、流量等)时,需要准备测试机型、测试包、测试环境、测试数据,会遇到以下问题:

  • 机型样本数不够多。
  • debug包不一定真实反应生产包的性能,但Android Studio需要debug包才能测试。
  • Android/iOS 测试环境的搭建与跨平台困难。
  • 大量测试数据整理分析。

以上这些问题很容易导致整个测试效率的低下,甚至无法实施落地。

基于EMAS云真机的调试能力,MQC在云上提供了更加完美便捷的性能测试工具。

云真机天然提供多达600+款测试机型,支持调试测试所有已安装应用,不依赖任何本地环境配置,测试数据一键上传统计。

同时,EMAS性能测试工具有以下特点:

  • 基于 app_process 与 instruments 协议实现的移动双端、跨平台性能采集;
  • 无侵入、短间隔(采集间隔稳定1s),低延迟(性能数据延迟小于100ms)、低功耗(对设备性能影响低于1%);
  • 应用+进程的测试方案,满足hybrid、小程序的测试需求。

3. 云上数据看板

性能数据的意义在于它将我们常见的各种问题通过技术的手段进行度量与量化,可以帮助我们在产品功能上线前,尽可能的发现潜在的性能问题和风险。MQC性能测试平台将存储于云上的数据,以尽可能多的维度可视化给用户,把好版本发布前的关口。

3.1 任务

用户使用云真机进行的每一次测试任务与性能数据,都会直接保存成测试任务,方便再次查看与确认历史数据。

3.2 用例

在实际的测试过程中,我们很容易发现,不同应用场景的性能数据是完全没有可比性的,在统计方法上只看性能数据的平均值也很难直接给出定性和定量的判断,没办法影响开发、产品的决策。

即便看似相同的场景,不同的产品决策也可能带来很大的性能数据差距:比如大多数云盘的相册基于流量与性能的考虑,显示的都是压缩后的图片;而我们的本地的一些相册软件,显示的基本都是原图,这样产品上的选择便导致了内存开销上巨大的差异。

数据看板在最初设计的时候就吸取了功能自动化用例平台时的建设经验,将每一次性能测试任务分用例存储,并且按照不同的用例维度对性能数据进行统计。在 EMAS 移动测试 控制台,不同子账号查看和管理相同的app与用例,满足多用户云端协作的需求。

3.3 多维度聚合

在用例维度的基础上,MQC 性能测试平台提供了多个维度的数据统计、聚合与分析能力。

• 设备分级

根据设备硬件性能打分,划分为高、中、低三个级别。
由于不同等级机型对 APP 实际性能指标的影响较大,这个因子可以较大程度减少硬件性能对指标置信度的影响。

• 应用版本

对于性能指标来说,通常有三种问题判断标准:

  • 基于行业技术经验定义的基线指标,这通常是技术决策者基于用户体验、性能要求、大数据分析给开发提出的底线标准;
  • 同行业 APP 性能指标横向对比,学习行业内优秀的技术实现一直是互联网快速发展的重要原因之一;
  • 同 APP 不同版本间的纵向对比,快速的发现新版本的优化效果,新功能对 APP 的影响等。

• 指标分布

指标分布可以帮助开发者快速判断指标区间,定位可能的异常任务与异常指标区间,更加有针对性的去查阅任务报告。

4. 未来规划

• 丰富指标:我们将继续完善更多性能指标的采集方案,如电量、GPU、温度等;
• 行业指标:MQC 将基于云上开发者数据、专家测试数据,整理并统计各个行业性能指标作为参考分享出来;
• 性能基线:上文提到,通常性能指标的观察标准有三,同行业APP性能指标;同APP不同版本性能指标;基于技术方案与行业数据的性能标准。性能基线的定义可以更好的约束开发者对极致性能体验的追求,最大可能降低性能问题出现的概率,如OOM、ANR问题。

最后附上演示视频,请点击下方链接查看
https://developer.aliyun.com/live/245866

原文链接:https://developer.aliyun.com/article/779875?

版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。

云上的移动性能测试平台相关推荐

  1. 3测试图片显示置信度_云上的移动性能测试平台

    1. 功能决定现在,性能决定未来 性能测试在移动测试领域一直是一个大难题,它最直观的表现是用户在前台使用 App 时的主观体验,然而决定体验优劣的背后,涉及到了许许多多的技术变迁. 当我们习惯于诺基亚 ...

  2. 乾象投资:基于JuiceFS 构建云上量化投研平台

    背景 乾象投资 Metabit Trading 成立于2018年,是一家以人工智能为核心的科技型量化投资公司.核心成员毕业于 Stanford.CMU.清北等高校.目前,管理规模已突破 30 亿元人民 ...

  3. “云上企业”是企业面向未来的战略选择

    简介:随着越来越多的企业加入数字化转型的行列,每个企业都在期待着数字化能够为其带来二次增长."云上企业"的规划与实施对于企业意味着技术升级.组织升级与战略升级的融合与叠加,对企业数 ...

  4. 零信任策略下云上安全信息与事件管理实践

    简介:随着企业数字化转型的深入推进,网络安全越来越被企业所重视.为了构建完备的安全防御体系,企业通常会引入了防火墙(Firewall).防病毒系统(Anti-Virus System,AVS).入侵防 ...

  5. 2019年技术盘点云数据库篇(二):阿里云携手MongoDB率先上线4.2数据库 云上数据库已是大势所趋...

    戳蓝字"CSDN云计算"关注我们哦! 作者 | 刘丹 出品 | CSDN云计算(ID:CSDNcloud) 随着技术的飞速发展,云数据库在云计算的大背景下,作为一种新兴的共享基础架 ...

  6. 云上全流程透明性备品备件协同管理

    1.大型装备行业的运维模式 传统大型装备的运维模式为,设备出现故障后,现场值班的工作人员通过电话联系供应商客服人员或者内部售后运维人员,客服人员通过电话沟通了解情况后,派遣技术支持工程师到现场解决问题 ...

  7. 阿里技术实战:一些云上资源调度的经验谈

    本文作者 李雨前,阿里云弹性计算技术专家,有 5 年的大规模集群资源管理调度实践经验:针对 long-time service 及 co-location 调度具有全面.深入的一线实践和解决问题经验, ...

  8. 张平安:加快云上数字创新,共建产业智慧生态

    摘要:华为高级副总裁.华为云CEO 张平安受邀出席第八届全球深商大会,以"加快云上数字创新,共建产业智慧生态"为主题发表演讲. 本文分享自华为云社区<张平安:加快云上数字创新 ...

  9. 阿里云郑大禹:云上应用构建的三大挑战与解决之道

    嘉宾 | 郑大禹   整理 | ClaireWang 出品 | CSDN云原生 2022年5月17日,在CSDN云原生系列在线峰会第5期"DevOps峰会"上,阿里云弹性技术专家郑 ...

  10. 云效平台——基于jmeter的轻量级性能测试平台

    摘要: 云效平台性能测试功能(Galaxy)是一个基于Jmeter的性能压测平台,它集脚本.场景.压测.监控和报表展示为一体,是一个能快速.低成本实施压测的平台.降低了入门使用成本,让开发和测试都可以 ...

最新文章

  1. java 自定义注解 解析_java自定义注解
  2. [.Net跨平台]部署DTCMS到Jexus遇到的问题及解决思路---Linux环境搭建
  3. 低耗时、高精度,微软提基于半监督学习的神经网络结构搜索算法
  4. python fileinput_python fileinput模块
  5. linux 命令api,linux命令行下字典,使用有道API
  6. call to member function bind_param() on boolean...........
  7. 25_android下文件访问的权限
  8. Kafka和Unix管道的示例
  9. SuperMap BIM+GIS技术白皮书
  10. 浅析游戏音效中的虚拟音效
  11. python远程调用摄像头_Python调用摄像头
  12. android11 前摄相头隐藏闪光灯图标
  13. vue3 H5 pdf插件 iphone查看pdf失败
  14. LTE-V2X车联网技术、标准、应用
  15. SQL1 从 Customers 表中检索所有的 ID
  16. 计算机营销专业,计算机营销专业自我评价
  17. 计算机网页设计实习报告怎么写,网页设计实习报告.docx
  18. video.js API
  19. 从B站的代码泄露事件中,我们能学到些什么?
  20. 【solarwinds】【Orion】综述

热门文章

  1. 再见了,少年——转自有意思吧
  2. 软件测试 (4)Linux命令
  3. c语言如何使用floor函数,floor函数 Excel中floor函数怎么使用
  4. matlab floor函数用法,matlab中fix, floor, ceil, round 函数的使用方法
  5. github python100天_GitHub - ychgithub/Python-100-Days: Python - 100天从新手到大师
  6. 看完此文,告诉你什么是黑中介
  7. 护腰暖腹的好伙伴,让腰部远离寒风侵袭
  8. 给大家推荐一本书:你只是看起来很努力
  9. “囍”博物馆与Interesting 有点意思
  10. 部分 SCI 英文期刊缩写对照表