Tekniske kyndige læsere ved, at benchmarks har ringe betydning i det virkelige liv. Benchmarks fortæller os lidt om den virkelige levetid på en smartphone eller tablet.

Her er en anden grund, vi bør kollektivt give vores besættelse af benchmarks og leaderboards - de kan spilles.

Gaming benchmarks er blevet en tidskendt tradition i PC GPU industrien, men hidtil har vi ikke set den praksis, der blev vedtaget i den mobile verden. Indtil nu er Samsung lige blevet fanget med røde hænder.

Her er historien - GPU'en af ​​Exynos 5 Octa-processoren i Galaxy S4 kører med en højere frekvens, når du kører benchmarks, end det kører spil eller andre almindelige apps.

Skærmbillede af AnTuTu benchmark med GPU frekvensen i baggrunden (Kredit: AnandTech)

Samsung indstiller faktisk GPU'en af ​​Exynos 5 Octa-versionen af ​​Galaxy S4 ved 533MHz under benchmarking, i modsætning til 480MHz under normal drift. De benchmarking apps, der udløser adfærd er GLBenchmark 2.5.1, AnTuTu og Quadrant.

AnandTech opdagede en lignende opførsel, når det drejer sig om CPU'en - når du kører GLBenchmark 2.5.1, AnTuTu, Linpack og Quadrant kører klynge Cortex A15 kerner @ 1.2GHz. Når du kører GFXBench 2.7 (et benchmark, der ikke blev hvidlistet i firmwaren) bruges den lavere-drevne A7-klynge med 500MHz. Desuden er CPU'en til Snapdragon 600-versionen af ​​Galaxy S4 indstillet til maksimale hastigheder, når benchmarks køres.

Ud over disse empiriske observationer analyserede AnandTech også firmware af Galaxy S4 og fandt ud af, at GPU og CPU er i høj gear, når specifikke benchmarks kører.

Mens Anand Lal Shimpi og Brian Klug of AnandTech elegant kalder opførelsen "benchmark optimering", er det klart, at vi ser på Samsungs underhanded forsøg på at gøre Galaxy S4 til bedre i benchmarks.

Historien er moralsk? Gør aldrig beslutninger baseret på benchmark scores.