Tieto čínske smartfóny podvádzali v benchmarku a ich výkon je reálne nižší

Dva čínske smartfóny značky REDMAGIC podvádzali pri teste 3DMark.

Ide o modely REDMAGIC 11 Pro a REDMAGIC 11 Pro +, ktoré zapli špeciálny výkonový režim v aplikácii 3DMark, aby dosiahli lepšie výsledky. Platforma 3DMark hovorí o porušení podmienok testovania a niektoré výsledky smartfónov RedMagic 11 Pro odstránila zo svojich verejných rebríčkov.

UL Solutions, ktorá vyrába benchmarkový nástroj 3DMark, zistila, že uvedené smartfóny REDMAGIC a ich varianty rozpoznali spustený benchmark a upravili svoj výkon. Výkonové nastavenia upravili tak, aby procesor a grafický čip bežali na podstatne vyššom výkone ako pri štandardnom používaní aplikácií.

Tento prístup nadhodnotil výsledky testu, ktoré však nezodpovedajú reálnemu výkonu zariadenia. Podľa firmy majú benchmarky slúžiť na objektívne porovnanie zariadení, a preto je takéto správanie považované za porušenie pravidiel testovania.

Ako na to prišli?

Firma UL Solutions na základe zistení vyradila smartfóny z rebríčka, umiestnila ich na koniec zoznamu a nezobrazujú sa v globálnom rebríčku porovnania. Firma ukazuje graf dosiahnutého skóre cez oficiálnu aplikáciu 3DMark a cez neoficiálnu zostavu. Ide o internú aplikáciu na testovanie a verifikáciu testovaných výsledkov. Má iné meno a preto sa aplikácie nevedia výkonnostne prispôsobiť, keďže ju nerozpoznajú ako známu aplikáciu 3DMark.

Podobné prípady aj v minulosti

Historicky nejde o prvý prípad, keď výrobcovia optimalizovali zariadenia pre benchmarky. Podobné situácie sa diali už v minulosti pri iných značkách. Výrobcovia benchmarkov sprísnili testovanie a pravidlá, ktoré musia aplikácie splniť.

Zdroj: UL Solutions

Prečítajte si aj: