Falsificando benchmarks? E daí - benchmarks ainda são uma merda

adb shell cat / sys / module / pvrsrvkm / parameters / sgx_gpu_clk nunca pode contar uma mentira

Samsung foi pega trapaceando. Eles estão manipulando resultados de benchmark para o Galaxy S4 permitindo que a GPU funcione em uma velocidade de clock mais alta e travando a CPU na frequência máxima, de uma maneira diferente que outros processos do sistema podem fazer. Eles dão a alguns dos próprios aplicativos da Samsung tempo limitado com essas velocidades mais altas, mas claramente favorece alguns aplicativos de referência populares. Eles foram pegos em flagrante por Brian e Anand da AnandTech - dois dos melhores gênios de hardware do mercado - e a Internet está uma confusão, como costuma acontecer.

Temos lido tudo sobre isso, incluindo as respostas de pessoas que de forma alguma são afiliadas a qualquer um dos partes envolvidas, e agora que já passa do meio-dia e eu tomei alguns coquetéis com o almoço, quero escrever algumas palavras sobre isso.

Samsung trapaceia em benchmarks

Para tornar as coisas melhores (ou algo assim), Samsung divulgou comunicado esclarecendo algumas coisas.

Em condições normais, o Galaxy S4 foi projetado para permitir uma frequência máxima de GPU de 533MHz. No entanto, a frequência máxima da GPU é reduzido para 480 MHz para certos aplicativos de jogos que podem causar uma sobrecarga, quando são usados ​​por um período prolongado de tempo em tela inteira modo. Enquanto isso, uma frequência máxima de GPU de 533 MHz é aplicável para a execução de aplicativos que geralmente são usados ​​no modo de tela inteira, como o S Browser, Gallery, Camera, Video Player e alguns aplicativos de benchmarking, que também exigem desempenho.

As frequências máximas de GPU para o Galaxy S4 foram variadas para fornecer a experiência de usuário ideal para nossos clientes e não se destinavam a melhorar determinados resultados de benchmark.

Continuamos comprometidos em fornecer aos nossos clientes a melhor experiência de usuário possível.

O problema é que isso não é bem verdade. A Anandtech tem dados que mostram que a Samsung não está sendo totalmente verdadeira - especialmente a parte em que afirma que as coisas "não tinham a intenção de melhorar certos resultados de benchmark". Isso também ignora completamente a parte do código onde "BenchmarkBooster" na verdade nomeia alguns aplicativos de benchmarking populares que são capazes de definir um sinalizador especial "boost_mode" quando são lançado.

Talvez essa declaração tenha vindo de alguém que não estava familiarizado com a situação e seja um erro honesto. Isso não significa que não seja falso. E as pessoas vão pular em cima da Samsung por dizer isso.

Mas isso realmente não importa.

Os benchmarks são uma merda. Eu sei que benchmarks são uma merda, porque eu tenho um Galaxy S4 e um Nexus 4 aqui ao meu lado, e as pontuações de forma alguma refletem a experiência do usuário. Eles são apenas números para pessoas que gostam de olhar para números e dizer às outras pessoas que seus números são maiores do que seus números, ou algo parecido. Quando eu quiser saber como qualquer dispositivo de computação, não apenas um Android, lida com o sistema e os aplicativos que gostamos de instalar, Eu ligo e uso. Algo como "25.611" não significa nada para mim. O fato de seu telefone ter "25.612" também não significa nada para mim. Na verdade, só rodamos aplicativos de benchmark quando nossas caixas de entrada não fecham e param de nos pedir para executá-los, e mesmo assim apenas em um lapso momentâneo de razão. Porque eles são uma merda.

Eles também são super fáceis de manipular, como evidenciado pela última gafe da Samsung, bem como mostrado aqui. Se você quiser números, diga-me qual número deseja e nós faremos isso acontecer. Você ainda não terá ideia do que eles significam no mundo real e como é importante quando você quer jogar Words with Friends ou transmitir pornografia da Internet.

Parabéns para a Anandtech por ir até o fundo disso, e uma vergonha para a Samsung por entrar no jogo e depois dar uma resposta insossa sobre isso quando foram pegos. Isso precisa ser dito, então direi. Mas quanto aos próprios benchmarks, e quaisquer números que o Galaxy S4 da Samsung possa fornecer, não me importo e acho que você também não deve se importar.