Huawei schummelt in Benchmarks - na und?

Die Experten von Anandtech gelten als ausgefuchst und unbestechlich, wenn es um Chips, Prozessoren und Labortests geht. Nun haben die Schrauber entdeckt, dass Huawei bei seinen und den Honor-Smartphones bei Benchmarks die Leistung nach oben schraubt und das Smartphone schneller laufen lässt als im Alltag, wenn keine Benchmark-App erkannt wird. Anandtech hat Huawei direkt mit den Erkenntnissen konfrontiert, und der Hersteller streitet das Verhalten nicht ab, im Gegenteil.

Die Erklärung, oder nennen wir es Ausrede, liefert Huawei gleich mit: Es machen doch sowieso alle, vor allem die Konkurrenz in China. Mit Ehrlichkeit könne man auf diesem Gebiet beim Kunden nicht punkten. Das mag richtig sein, trotzdem sollte man sich nicht erwischen lassen. Das hat man zuletzt etwa bei der Affäre um die Abgas-Betrügereien in der Autobranche gesehen. Aber am Ende hat Huawei ja recht: Diese Tricksereien sind nichts Besonderes in der Mobile-Branche, und auch wenn zuletzt keiner mehr damit auffällig geworden ist, ist das ein offenes Geheimnis.

Jeder trickst und am Ende verlieren alle

Mich erinnert das mit den Tricksereien bei Benchmarks ein bisschen an den professionellen Sport. Wenn, wie beispielsweise bei der Tour de France, so viele Sportler dopen, dann ruiniert das zwar das Ansehen des Sports, aber der Wettkampf untereinander ist auch nicht wesentlich weniger fair, als es durch die unterschiedlichen Ressourcen der Teams ohnehin schon ist.

Während ich es bei der Tour de France - und die ist wirklich nur ein Beispiel, ich hätte auch viele andere Sportarten und Events nennen können - schade finde, dass der Wettkampf unter den Betrügereien leidet und der Sport in Verruf kommt, ist es mir bei Benchmarks mittlerweile fast egal. Es gibt keinen namhaften Hersteller, der nicht versucht, bei Benchmarks besonders gut darzustellen, da ist Huawei alles andere als allein.

Ohne Standards und Kontrolle sind Tests nur die Hälfte wert

Ja, klar, die Tests geben einen Hinweis darauf, wie leistungsfähig eine Plattform ist, und ja, sie sorgen für eine gewisse Vergleichbarkeit. Aber: Solange die Tests nicht standardisiert und in welcher Form auch immer kontrolliert sind, sind sie nicht mehr als ein Fingerzeig und zu leicht zu beeinflussen. Sie sind wichtig als einer von vielen Indikatoren bei einem Performance-Test, aber längst nicht entscheidend. Die Punktewerte gilt es nur grob zu betrachten, ein paar hundert Punkte mehr oder weniger machen keinen großen Unterschied.

• Smartphone-Werbung: Es heißt tricksen und mogeln, wo es geht

Außerdem: Egal, wie gut die Benchmark-Werte auch sind, wenn ein Smartphone im Alltag Schwächen zeigt, merken das Kunden und Tester garantiert. Das ist eben das wahre Leben, und da hilft kein noch so fabelhafter Benchmark-Rekord. Sollen sie doch alle schummeln, wir kriegen schon raus, ob die Smartphones schnell oder lahm sind. Darauf könnt Ihr Euch verlassen.

Wie denkt Ihr über die Relevanz von Benchmarks?

Via: Areamobile Quelle: Anandtech