性能测试平台(云上的移动性能测试平台)

2022-10-04 11:01:50 发布:网友投稿
热度:105

性能测试平台(云上的移动性能测试平台)

1. 功效决议现在,性能决议未来

性能测试在移动测试范畴一直是一个大难题,它最直观的表示是用户在前台应用 App 时的主观体验,然而决议体验优劣的背后,涉及到了许许多多的技巧变迁。

  • 当我们习惯于诺基亚时,智能机涌现了;当我们学会native开发时,hybrid来了;当各种 hybrid 框架下的巨型运用偏向成熟时,小程序涌现在了我们眼前;紧接着直播、iot、ar、vr、人工智能,新的技巧与运用场景正在以无法想象的速度向前发展。性能测试技巧在迅速变更的场景与开发技巧面前,面临着伟大的挑衅,当我们还在纠结如何测试 a 时,b 就已经出来了。

  • 性能测试本身,有发展日渐成熟的解决计划,如线上性能监控APM、线下性能采集工具;有基于各个运用场景衍生的测试技巧,如压力测试、稳固性测试、功耗测试等;也有基于各项性能指标(内存、cpu、电量、流量)而来的各种专项测试才能。

我们致力于打造线上线下一体的性能解决计划,愿望能够赞助开发者发明、定位与解决一系列移动端性能问题。本文将侧重介绍 EMAS 性能测试平台的才能与计划,还是那句话,功效决议现在,性能决议未来。

2. 云上的性能测试工具

通常我们在进行专项测试(内存、cpu、电量、流量等)时,须要预备测试机型、测试包、测试环境、测试数据,会遇到以下问题:

  • 机型样本数不够多。

  • debug包不必定真实反响生产包的性能,但Android Studio须要debug包能力测试。

  • Android/iOS 测试环境的搭建与跨平台艰苦。

  • 大批测试数据整顿剖析。

以上这些问题很容易导致全部测试效力的低下,甚至无法实行落地。


基于EMAS云真机的调试才能,MQC在云上供给了更加完善便捷的性能测试工具。

云真机天然供给多达600+款测试机型,支撑调试测试所有已安装运用,不依附任何本地环境配置,测试数据一键上传统计。

同时,EMAS性能测试工具有以下特色:

  • 基于 app_process 与 instruments 协定实现的移动双端、跨平台性能采集;

  • 无侵入、短间隔(采集间隔稳固1s),低延迟(性能数据延迟小于100ms)、低功耗(对装备性能影响低于1%);

  • 运用+过程的资源网测试计划,满足hybrid、小程序的测试需求。


3. 云上数据看板

性能数据的意义在于它将我们常见的各种问题通过技巧的手腕进行度量与量化,可以赞助我们在产品功效上线前,尽可能的发明潜在的性能问题和风险。MQC性能测试平台将存储于云上的数据,以尽可能多的维度可视化给用户,把好版本宣布前的关口。

3.1 义务

用户应用云真机进行的每一次测试义务与性能数据,都会直接保留成测试义务,便利再次查看与确认历史数据。


3.2 用例

在实际的测试进程中,我们很容易发明,不同运用场景的性能数据是完整没有可比性的,在统计办法上只看性能数据的平均值也很难直接给出定性和定量的断定,没方法影响开发、产品的决策。

即便看似雷同的场景,不同的产品决策也可能带来很大的性能数据差距:比如大多数云盘的相册基于流量与性能的斟酌,显示的都是紧缩后的图片;而我们的本地的一些相册软件,显示的根本都是原图,这样产品上的选择便导致了内存开销上伟大的差别。

数据看板在最初设计的时候就汲取了功效主动化用例平台时的建设经验,将每一次性能测试义务分用例存储,并且依照不同的用例维度对性能数据进行统计。在 EMAS 移动测试 掌握台,不同子账号查看和管理雷同的app与用例,满足多用户云端协作的需求。

3.3 多维度聚合

在用例维度的基本上,MQC 性能测试平台供给了多个维度的数据统计、聚合与剖析才能。

• 装备分级

依据装备硬件性能打分,划分为高、中、低三个级别。
由于不同等级机型对 APP 实际性能指标的影响较大,这个因子可以较大水平减少硬件性能对指标置信度的影响。

• 运用版本

对于性能指标来说,通常有三种问题断定尺度:

  • 基于行业技巧经验定义的基线指标,这通常是技巧决策者基于用户体验、性能请求、大数据剖析给开发提出的底线尺度;

  • 同行业 APP 性能指标横向比较,学习行业内优良的技巧实现一直是互联网迅速发展的主要原因之一;

  • 同 APP 不同版本间的纵向比较,迅速的发明新版本的优化后果,新功效对 APP 的影响等。

• 指标散布

指标散布可以赞助开发者迅速断定指标区间,定位可能的异常义务与异常指标区间,更加有针对性的去查阅义务报告。


4. 未来计划

  • 丰硕指标:我们将持续完美更多性能指标的采集计划,如电量、GPU、温度等;

  • 行业指标:MQC 将基于云上开发者数据、专家测试数据,整顿并统计各个行业性能指标作为参考分享出来;

  • 性能基线:上文提到,通常性能指标的视察资源网尺度有三,同行业APP性能指标;同APP不同版天性能指标;基于技巧计划与行业数据的性能资源网尺度。性能基线的定义可以更好的束缚开发者对极致性能体验的寻求,最大可能下降性能问题涌现的概率,如OOM、ANR问题。


下一篇:奇门遁甲基础知识(奇门遁甲入门知识和排盘方法)
上一篇:虎门大桥异常抖动如波浪(东莞虎门大桥发生波浪形抖动,专家解释抖动原因)