De fleste almindelige forbrugere ved meget lidt om benchmarks for at bekymre sig om dem, og de der gør det, ved at syntetiske benchmark-scores skal tages med en knivspids salt på det bedste tidspunkt. Det ser dog ikke ud til at afskrække smartphone-producenterne fra at ty til kunstige (og ofte uetiske) måder at sprænge benchmark-score på.
Mens Samsung, OnePlus og andre velrenommerede virksomheder alle har været fanget i denne kontrovers fra tid til anden, siger AnandTech nu, at Huawei, der allerede trænger under anklager om skjult aflevering af DSLR-skud som kameraprøver på sine smartphones, også er skyldig i fudging benchmark scorer ligesom mange af sine kinesiske konkurrenter.
Virksomhedens Huawei P20 Pro, Honor Play og Huawei Nova 3 er blevet grundlagt kunstigt med en opblussen af benchmark-scores ved at hvidliste bestemte apps, der bruges til at registrere scores. Dette betyder, at telefonerne ikke gashindrer, når disse apps bruges, hvilket ikke er tilfældet ved regelmæssig brug.
Ifølge rapporten hvidlister producenter ofte populære benchmarking-applikationer på deres smartphones for at forhindre termisk nedsættelse, mens de kører CPU'en ved dens fulde klokkehastighed, hvilket gør det muligt for disse apps kunstigt at udtrække toppræstationer, som ellers ville være umulige at opnå i den virkelige verden..
Som et resultat viser præstationsnumrene sig at være unaturligt oppustet, og selvom det kan være godt for markedsføring, reducerer det energieffektiviteten drastisk, da chippen skubbes ud over standarddriftsfrekvenser..
For at illustrere sit punkt citerede rapporten eksemplet på Huaweis nyligt udgivne spiltelefon, Honor Play, som tilsyneladende gav drastisk forskellige resultater med benchmark-detektionstilstand slået til og fra.
Når han blev konfronteret med beviser på sidelinjen af den for nylig afsluttede IFA-messe i Berlin, var præsidenten for software hos Huaweis Consumer Business Group, Dr. Wang Chenglu, efter sigende relativt nonchalant med hensyn til hvad der ser ud til at være alvorlige beskyldninger om falsk reklame.
Ifølge AnandTech afviste Dr. Wang helt vigtigheden af benchmarks i vurderingen af en smartphone og sagde, at disse apps på ingen måde repræsenterer brug i den virkelige verden. Han sagde også tilsyneladende, at virksomheden arbejder med industripartnere i over et år for at komme med tests, der mest efterligner virkelige brugssager.
Indtil et nyt sæt benchmarks blev standardiseret, syntes virksomheden imidlertid ikke at være i noget humør til at bevæge sig væk fra sin vildledende praksis. Ifølge ham bliver sådan vildledende markedsføring 'almindelig praksis' i Kina, hvor 'andre producenter vildleder også med deres antal'. Selvom han muligvis ikke har sagt det med så mange ord, tror AnandTech, hvad den krigsførende Huawei-eksekver betød den dag var, 'andre udfører den samme test, får høje score, og Huawei kan ikke tie''.
Det vil være interessant, hvordan det hele spiller ud i fremtiden, men med de førende aktører i branchen, der ikke er villige til at tage et tilbagestående skridt, vil det være bedre, hvis alle smartphone-producenterne fulgte i fodsporene fra virksomheder som Meizu, der erklærer fra starten, at alle benchmarks vil blive kørt i en særlig højtydende tilstand.