源之原味

华为发现 P20 作弊基准测试

 

抽象

这篇文章来自theverge.com。原文网址是: https://www.theverge.com/circuitbreaker/2018/9/6/17828534/huawei-benchmarks-rigged-p20-3dmark-ai

以下内容由机器翻译生成。如果您觉得可读性不好, 请阅读原文或 点击这里.

华为已经被发现优化一些顶级智能手机, 以在基准测试上过度执行。在星期二, AnandTech 发现 华为的 P20 已被编程, 以最大限度地提高性能, 特别是当运行 3DMark, 一个流行的标杆应用。今天, 公司落后3DMark 后续 与声明 说, 它已经证实了这一发现, 并将 delist 的 P20, 以及其他三华为手机类似的行为, 从其基准排行榜。

摘牌手机包括 P20、P20 Pro、新星3和荣誉剧。华为在一份声明中承认这种行为。 给予 Android 管理局, 称其手机设计为根据运行的应用程序调整性能。

但华为实施这种行为的方式是不允许的。虽然手机可以调整他们的性能, 作为他们的典型行为的一部分, 在高工作量, 他们不能硬编码, 以最大限度地发挥他们的行为, 只是因为一个特定的基准应用程序运行。根据 UL 的数据, 华为似乎已经做到了这一点, 这是3DMark 软件的幕后黑手。

当 UL 运行一个内部版本的 3DMark, 这是华为的手机无法识别的名称, 手机在测试中表现更糟。这表明, 手机实际上并没有足够的智能来识别自己的高性能需求, 这意味着基准评分并不准确地反映出手机如何处理典型的应用程序, 而不需要华为的特别关注。

作为惩罚, 3DMark 已经删除了这些手机的排名从其排行榜, 并在其网站上装饰他们的列表, 并指出, 手机的 "制造商没有遵守 UL 基准规则。他们的许多结果也被删除了。

华为离第一家公司很远, 因为它玩弄基准结果。三星在2013年的旗舰手机上因同样的行为而被逮捕, 而就在去年, OnePlus 被发现也做了同样的事情。这一时机对华为来说尤其不幸, 因为仅仅几周前它就被抓住了。 试图通过单反相机的照片 作为一张手机的照片。

有趣的是, 这些基准其实并不重要。调整手机以优化基准应用程序可能会产生一些数字 , 使一个小的书流口水 , 但这些数字并不与实际使用手机的经验相关。他们可能会说, 手机在沉重的压力下表现得多么好, 比如玩游戏, 但是更好的测试就是用它玩游戏, 看看会发生什么。

华为甚至承认这一点。在其声明中, 该公司表示 "始终优先于用户体验, 而不是追求高基准评分--尤其是因为智能手机基准和用户体验之间没有直接联系."然而, 它仍然编码它的手机, 以提供更高的性能时, 运行一个基准测试。

但华为还声称, 它的手机 "包括 AI", 它的智能足以根据任何应用程序运行来优化性能, 显然情况并非如此。如果是这样的话, 那么提高基准的性能将是公平的游戏--但事实上, 这并不是电话在苛刻情况下如何进行的真实反映。

Leave A Reply

Your email address will not be published.