Advertentie sluiten

server AnandTech.com maakte een schandalige onthulling die veel fabrikanten van Android-telefoons betrapte op het bedriegen van benchmarks door doelbewust hun chipsets te overklokken tijdens het testen:

Met uitzondering van Apple en Motorola verkoopt (of verkocht) letterlijk elke OEM waarmee we hebben gewerkt minstens één apparaat waarop deze dwaze optimalisatie wordt uitgevoerd. Het is mogelijk dat oudere Motorola-apparaten hetzelfde hebben gedaan, maar geen van de nieuwere apparaten die we bij ons hebben gehad, vertoont dit gedrag. Het is een systematisch probleem dat de afgelopen twee jaar blijkbaar aan de oppervlakte is gekomen, en het is verre van alleen Samsung.

Dit onthullende artikel werd voorafgegaan door verschillende andere veroordelingen, enerzijds in deze zaak Samsung Galaxy S4 en de nieuwste Galaxy Note 3:

Het verschil is respectabel. In de multi-core test van Geekbech scoorde de Note 3 benchmark 20% beter dan onder ‘natuurlijke’ omstandigheden. Als de mogelijkheid van een prestatieverbetering in de benchmarks wordt omzeild, zal de Note 3 onder het niveau van de LG G2 vallen, wat we oorspronkelijk hadden verwacht vanwege de identieke chipset. Zo'n grote toename betekent alleen maar dat de Note 3 bij inactiviteit met de CPU knoeit; er worden veel meer prestaties beschikbaar gesteld wanneer deze op dit apparaat worden gebenchmarkt.

Samsung, HTC, LG, ASUS, al deze fabrikanten spelen opzettelijk vals in de benchmarks door doelbewust de CPU en GPU te overklokken om op papier hogere resultaten te behalen. Deze verhoging werkt echter alleen voor benchmarks die zijn opgenomen in de lijst binnen het systeem, en dat is niet eenvoudig om naartoe te werken. Er heerst kennelijk een overtuiging onder fabrikanten dat “als hij anderen bedriegt, wij dat ook moeten doen. We zullen immers niet achterlopen in de benchmarks.”

Apple heeft nooit gepocht over CPU-klokken of benchmarkresultaten (met uitzondering van benchmarks van webbrowsers) op zijn iOS-apparaten, dat was ook niet nodig. Als het apparaat perfect soepel werkt, maakt de klant zich niets uit van testscores waarvan hij de namen niet eens kan uitspreken, laat staan ​​onthouden.

In de wereld van Android is alles anders, fabrikanten vechten met dezelfde (of soortgelijke) wapens en benchmarks zijn een van de weinige plaatsen waar ze kunnen laten zien dat hun apparaat beter is dan andere. Deze openbaarmaking maakt de meeste benchmarks echter irrelevant, omdat recensenten en lezers niet langer zeker weten wie er vals speelt en wie niet. Een populair technisch dingetje dat alleen door recensenten wordt gebruikt om te bewijzen dat ze het apparaat echt grondig hebben getest, en voor nerds voor wie deze cijfers echt iets betekenen, zal het misschien helemaal uit de mobiele sfeer verdwijnen en zal iedereen in plaats daarvan gaan kijken of de systeem is soepel, evenals de toepassing erin. Dat is tenslotte altijd zo geweest met de iPhone.

Het zal tegenwoordig misschien niemand verbazen dat Samsung en andere fabrikanten vals spelen om zichzelf er beter uit te laten zien. Maar het is verdrietig en gênant tegelijk. Grote bewondering gaat daarentegen uit naar de server AnandTech i ArsTechnica, wat specifieke lijsten met "ondersteunde" benchmarks bleek te zijn ontleden uit de code.

.