Istorija žino daugybę atvejų, kai išmaniųjų telefonų gamintojai buvo pagauti manipuliuojant savo įrenginių našumu „benchmarkuose“. Naujas atvejis nutiko su žaidimų telefonais „Red Magic 11 Pro“, kurie, pasirodo, buvo suprogramuoti veikti maksimaliu pajėgumu, kad testuose surinktų kuo daugiau taškų.
Japonų tinklaraštininkas pastebėjo, kad „Red Magic 11 Pro“ rodo gerokai aukštesnius rezultatus įprastoje „benchmarko“ versijoje nei tame pačiame teste, bet su pakeistu APK failo paketo pavadinimu. Taip užmaskuota programėlė nebeatpažįstama telefono programinės įrangos kaip „benchmarkas“, todėl įrenginys pradeda veikti mažiau agresyviu režimu ir demonstruoja gerokai mažesnį našumą.
Įdomu, kad tik tokiu režimu įrenginiui pavyksta sėkmingai užbaigti testą: įprastu režimu procesas nutraukiamas dėl perkaitimo ir įrenginio apsauginio išsijungimo. Sužinoję apie tai, „3DMark“ kūrėjai pašalino „Red Magic 11 Pro“ seriją iš lyderių sąrašo:
„Įrenginiai pašalinami iš sąrašo, jei gamintojas nesilaiko mūsų testavimo taisyklių.“
ZTE atstovai sureagavo į situaciją ir paskelbė tokį pareiškimą:
„REDMAGIC įrenginiai sukurti užtikrinti aukštą našumą, ypač resursams reikliuose žaidimuose ir pažengusių vartotojų scenarijuose. Todėl mūsų įrenginiai siūlo kelis našumo režimus, leidžiančius vartotojams reguliuoti procesoriaus, vaizdo plokštės ir aušinimo sistemos parametrus pagal savo poreikius. Pavyzdžiui, „Diablo režimas“ skirtas maksimaliai našumui sudėtingomis sąlygomis.
Svarbus mūsų sistemos projektavimo aspektas – balansas tarp našumo, energijos suvartojimo ir šilumos išsklaidymo. Įrenginys realiu laiku dinamiškai vertina programėlių apkrovą ir atitinkamai paskirsto resursus. Paleidus resursams reiklias programas, tokias kaip grafiškai sudėtingi 3D žaidimai, sistema taiko efektyvesnį užduočių planavimą, kad užtikrintų sklandų ir stabilų veikimą.
Kalbant apie „benchmarkus“, mes juos laikome potencialaus įrenginio našumo indikatoriumi kontroliuojamomis didelės apkrovos sąlygomis. Todėl našumo rezultatai gali skirtis priklausomai nuo sistemos nustatymų, naudojimo scenarijų ir aplinkos veiksnių.
Mes ir toliau siekiame tiekti skaidrius ir aukšto našumo produktus, atitinkančius tiek žaidėjų, tiek pažengusių vartotojų lūkesčius.“
Viena vertus, nėra nieko blogo, kad gamintojai iš anksto reguliuoja įrenginių našumą priklausomai nuo programėlių – tai naudinga tiek temperatūros kontrolei, tiek energijos taupymui paprastose, nereikliosiose programose, tokiose kaip žinučių siuntimo ar vaizdo grotuvų programos. Kita vertus, sąmoningas našumo didinimas testavimo programėlėse, kurių rekordais įmonės vilioja pirkėjus, neatrodo sąžiningas sprendimas. Ypač turint omenyje, kad tokių testų metu įrenginiai gali įkaisti iki pavojingai aukštų temperatūrų, keliančių grėsmę ne tik komponentams, bet ir naudotojui.
