Huawei a été pris à l’optimisation de certains de ses meilleurs smartphones à effectuer sur les tests de référence. Mardi, AnandTech a découvert que Huawei P20 a été programmé pour optimiser les performances spécifiquement lors de l’exécution de 3DMark, un quartier populaire d’analyse comparative de l’app. Aujourd’hui, la société derrière 3DMark suivi d’une déclaration disant qu’il avait confirmé les constatations et serait de retirer le P20, ainsi que trois autres téléphones Huawei avec un comportement similaire, à partir de son indice de référence des classements.
La radié de la liste des téléphones comprennent les P20, P20 Pro, Nova 3, et l’Honneur de Jouer. Huawei admis à ce comportement dans une déclaration accordée à Android Autorité, en disant que ses téléphones sont conçus pour ajuster leur rendement en fonction de l’application en cours d’exécution.
Huawei a dit que c’était de l’IA, mais UL trouvé qu’il n’était pas
Mais la façon dont Huawei mis en œuvre ce comportement n’est pas autorisé. Alors que les téléphones peuvent ajuster leurs performances dans le cadre de leur comportement typique sous la lourde charge de travail, ils ne peuvent pas être codés en dur pour optimiser leur comportement juste parce que un benchmark application est en cours d’exécution. C’est ce que Huawei semble avoir fait, selon les normes UL, qui est derrière le logiciel 3DMark.
Lors de l’UL a couru une version interne de 3DMark, qui Huawei téléphones ne pouvait pas reconnaître le nom d’, les téléphones effectué pire dans le test. Qui a indiqué que les téléphones n’étaient pas réellement assez intelligent pour identifier les exigences de performance sur leur propre, ce qui signifie la référence du score n’était pas un reflet exact de la façon dont le téléphone serait en mesure de gérer une application classique sans une attention particulière de Huawei.
Comme punition, 3DMark a supprimé ces téléphones classement de son classement et orné de leurs annonces sur son site web, avec une note que le téléphone est “fabricant n’a pas respecté UL indice de référence des règles.” Beaucoup de leurs résultats ont été supprimés.
Huawei est loin d’être la première entreprise à obtenir pris jongle avec les résultats de référence. Samsung s’est cassé le même comportement sur ses téléphones phares en 2013, et l’année dernière, OnePlus a été trouvé pour avoir fait la même chose. Ce moment est particulièrement regrettable pour Huawei, depuis quelques semaines auparavant, il a été pris en essayant de faire passer un DSLR photo comme une photo de l’un de ses téléphones.
D’autres ont été pris à faire dans le passé
Ce qui est drôle dans tout ça, c’est que les points de référence ne sont pas vraiment beaucoup d’importance. Régler un téléphone pour optimiser la référence des applications peuvent produire quelques chiffres qui font un petit sous-ensemble de nerds baver, mais ces chiffres ne correspondent pas à l’expérience réelle de l’utilisation du téléphone. Ils pourraient parler de la façon dont le téléphone effectue sous forte contrainte, comme tout les jeux, mais un meilleur test est de jouer un jeu avec lui et savoir ce qui se passe.
Huawei même admet que cette. Dans sa déclaration, la société a déclaré qu’elle “toujours donne la primauté à l’expérience utilisateur plutôt que de poursuivre les high scores de référence — surtout depuis qu’il n’y a pas une connexion directe entre le smartphone repères et l’expérience utilisateur.” Et pourtant, il toujours codé son téléphone afin d’offrir une meilleure performance lors de l’exécution d’un test de référence.
Mais Huawei affirme aussi que ses téléphones ” comprennent AI suffisamment intelligente pour optimiser la performance en fonction sur n’importe quelle app est en cours d’exécution, et clairement c’est pas le cas. Si elle l’était, l’amélioration des performances aux tests de juste jeu — mais comme il est, il n’est pas un vrai reflet de la façon dont le téléphone effectue dans les situations exigeantes.