Por que falsificar benchmarks tornou-se tão fácil?
Muitas vezes temos vazamentos de especificações técnicas, performance e desempenho em torno de smartphones aguardados pelo mercado. Para comprovar o poderio do dispositivo, esses rumores se cercam de apps de benchmark como AnTuTu, Geekbench, entre outros. Mas qual é a real confiabilidade desses testes?
- Será que os rumores afetam a expectativa do lançamento de um smartphone?
- 13 dicas essenciais que você precisa experimentar no seu Android
Sim, esses pontos de referência até que são úteis para aprender alguma coisa. Mas manipular os resultados de benchmarking é uma operação que não requer muito tempo e permite que você exiba os dados que quiser. Nas próximas linhas, vamos mostrar a você como é fácil falsificar esses números.
Modifique o build.prop até do "Galaxy S8"
Os dados importantes do sistema são armazenados em um arquivo que inclui o build.prop de mesmo nome, modelo e versão do Android do smartphone. E com um aplicativo, é possível modificar este arquivo, sendo que a única condição é que o aparelho precisa ser rooteado.
Um editor de texto com acesso root (ou diretamente com o editor BuildProp) permite editar números importantes. Você deve, então, acessar o arquivo build.prop para recuperar os valores atuais. Nesse processo, consegui fazer com quem um Moto G3 virasse um hipotético Samsung Galaxy S8. E, como você pode ver na imagem abaixo, estou rodando até mesmo o Android 7.1, sendo que o 7.0 sequer foi lançado.
Ponto importante antes de continuar lendo o nosso guia: o build.prop é um arquivo de sistema. Alterá-lo pode trazer consequências graves ao dispositivo e impedir até mesmo que ele seja reinicializado. Logo, não recomendamos que você faça isso com um smartphone que você usa todos os dias. Logo, tente usar aquele aparelho velho, que serve como "cobaia" para seus experimentos.
E para alterar esses valores, você precisará do app BuildProp editor e realizar as seguintes modificações:
- ro.product.manufacturer: Samsung
- ro.product.brand: Samsung
- ro.product.model: Galaxy S8
- ro.product.name: heroltexx
E quer o "Android 7.1" no seu telefone? É só digitar esses comandos:
- ro.build.version.release: 7.1
Ao alterar esses valores, você pode obter resultados satisfatórios e, se quiser que sua manipulação fique mais autêntica, é só cavar mais fundo no build.prop. No entanto, para os meus testes, estas opções são suficientes. Depois de modificar os itens acima, basta reiniciar o telefone.
Geekbench: perfeito para a criação de falsos benchmarks
O Geekbench é o app mais do que adequado para minha experiência, porque os testes são realizados de forma rápida e as informações aparecem facilmente no menu. Para isso, basta selecionar a opção View Online e inserir os resultados de referência.
AnTuTu e Geekbench: a situação é complicada
O AnTuTu também fornece uma página útil que reúne todos os resultados, mas não dá a possibilidade de publicar os resultados. A tela abaixo mostra que o nosso "Galaxy 8" roda o "Android 7.1". Mas, ainda que o AnTuTu tenha a função de compartilhamento integrado, não foi possível fazer com ele funcionasse em nosso teste.
No primeiro teste com o GFXbench, o aparelho recebeu mensagens de aviso indicando que os resultados são armazenados no banco de dados. E este não é um problema para o nosso "Galaxy S8". No entanto, o GFXbench pede a confirmação de algumas informações para avaliar a veracidade das provas.
Como se falsifica um benchmark perfeito?
Para tornar os resultados mais críveis, a melhor alternativa é usar um smartphone com especificações similares. Ou seja, se você quer simular um Galaxy S8, tente utilizar um Galaxy S7 e assim por diante. Com um app como o Geekbench, a diferença passa despercebida.
Logo, se você tiver sorte, conseguirá atrair toda a atenção de alguns sites dedicados ao mundo da tecnologia, que mostrarão seu falso benchmark e darão como notícia real. Afinal, se está na internet é verdade, não?
Não.
Conclusão: os rumores de benchmark são fáceis de falsificar
Com esse meu teste, eu queria mostrar como é fácil falsificar dados a partir de um ponto de referência para dispositivos que ainda nem chegaram ao mercado. O Geekbench, em particular, é extremamente vulnerável, mas, com um pouco de esforço, você pode também falsificar o AnTuTu e o GFXBench.
Sim, há casos de funcionários das fabricantes que testam alguns aparelhos que serão lançados futuramente e postam as fotos na internet. Mas é algo bem raro de acontecer.
Você ainda confia em benchmarks?
Todo sistema possui falhas. Mas a maior falha é falta de carater. A pessoa que ganha fama com teste falsos é ridícula.
Nunca confiei muito nesses benchmarks.
Cabe agora aos desenvolvedores criarem forma de avaliar os valores do testes, tanto comparando com outros testes na sua base dados como também comparando a integridade dos dados no smartphone.
Não é que a pessoa seja ridícula. Simplesmente esse teste do AnTuTu não é a verdade superior pra avaliar desempenho única e exclusivamente. Já foi tempos...
kkkk Ri das brincadeiras.
Tem uma opção nas configurações (OPÇÕES PARA DESENVOLVEDOR), tal que quando seleciona-se FORÇAR RENDERIZAÇÃO GPU e bota o AnTuTu pra rodar, a pontuação é muito maior quando comparado ao método normal (sem opções de desenvolvedor). O meu LG G2, sem forçar renderização, alcança 35000 pontos. Já com a opção de desenvolvedor marcada, chegou em 48000 pontos.. dá pra tapear o AnTuTu fácil!!!
Acho que ae não tapear o AnTuTu. Tá mais para "tunar" o seu smartphone.
cara, tem uma outra opção que chama aumentar 4x MSAA, que depois que ativei juntamente com essa da GPU fez meu asphalt 8 rodar super hiper melhor.... ta muito top! so nao sei ate que ponto isso pode forçar e estragar meu celular
Nunca confiei em benchmarks eu prefiro ver uma análise para poder escolher um smartphone
Samsung era mestre nisso, foi pega no flagra no passado, quando ela inseria um aplicativo oculto no sistema que quando reconhecia um aplicativo de teste de desempenho, este aplicativo oculto, ativava os núcleos do processador no máximo, para mostrar uma falsa velocidade, já que não existe aplicativo hoje, que utilize todo potencial do processamento.
Nunca levo em consideraçao esses testes nem pra compra de smart nem pra peças de pc .
Desde as manipulações feitas por grandes empresas para "inflar" o desempenho de seus flagships ou mesmo as trollagens de usuários avançados em sites especializados, o benchmarking vai se tornando cada vez menos confiável e, porque não dizer, relevante.
A experiência final do usuário, com todos os prós e contras disso, é muito mais importante.
Bom saber que existem mais pessoas alinhadas com esse pensamento...
Nunca levei benchmarks em consideração numa compra. Normalmente, para eu saber dos desempenhos eu procuro por vídeos que demonstram o dispositivo sob tarefas pesadas e etc.
Concordo
minha nossa ...
Surreal
É confiar não é a palavra de ordem, visto que se é possível fazer adulteração, falsificação. E assim, o melhor a se fazer é buscar em sites especializados, o Android Pit é a indicação, para saber do desempenho do dispositivo desejado.
Realmente...benchmark virou marketing para as OEMs , não demonstram muita coisa , o melhor ainda é um hands on por parte do usuário antes da compra.
Ai o consumidor fica com uma pulga atrás da orelha " este teste é real ou não " !
Pra 95% dos usuários tanto faz o ranking de testes, para 4% vale para falar com o amigo que o dele é mais hard e para 1% esses números importam porque sabem do que se trata.
Tá igual os mpx das câmeras, onde a maioria pensa que quanto maior melhor.
Por isso me interesso mais pois display de qualidade, aúdio estéreo, UI leve e rápida, câmera boa e funções colocadas pelo fabricante.
Acho inútiu benchmark assim como as empresas que só adicionam ram e chip novo. Algumas nem se preocupam com materiais de qualidade, boa experiência de uso, otimização do sistema etc....
obs: fiz um teste estes dias, deixei 35 apps abertos. Dos 3 gb ram (2,7 livres para uso), ainda tinha 1,4 gb de sobra. Ao selecionar um app no multitarefas, nem chegava a 1s para abrir. Acho que 6 gb ram é inútil, muito pc trabalha com 4 e faz tarefa muito mais pesada.
Tem jogos q nao rodam bem em 4 GB de ram mas e por causa da má otimização , se tudo fosse bem otimizado daria pra fazer mtt coisa pesada com 3 GB pena q nao e assim
Entendo que assim como jogos apresentados em feiras do assunto eles usam supermaquinas e uma maquiagem pra deixar o espectador cheio de orgulho e ansiedade pelo jogo apresentado, mas no quesito smartphone a situação é de se faz um beachmak de um aparelho alpha e divulgam, mas quando sai o orçamento do lançamento se reduz os custos e lançam algo mediano ao que foi exposto nestes aplicativos. Aconteceu com o aparelho da LG recentemente se não me engano o G5 que no Brasil nerfaram seus hardware assim como nerfaram em outros países.
Sempre desconsidero esses testes. Especialmente o AnTuTu, que fica privilegiando os smarts chineses.
Nunca considerei relevante estes apps de benchmark, porém acompanho as notícias sobre o assunto. Procuro ver o desempenho dos dispositivos na prática com reviews, comparativos, testes diversos, opiniões dos usuários, etc. Assim descido por um ou outro aparelho.
Não acredito nestes supostos testes, já ví em vários sites resultados diferentes para o mesmo modelo de smartphone. Nos reviews nem vejo estes tais números. Pra mim o que vai importar é no dia a dia, com o aparelho em mãos.
Os sites e a imprensa de forma geral têm grande parcela de culpa para propagação destes testes fajutos, pois divulgam esses falsos testes supostamente vazados como furo de reportagem. Vide Note 7 com 3 GB de RAM divulgado aki no AP, sendo que o seu antecessor Note 5 possui 4 GB. Logicamente a Samsung não daria um passo atrás, no máximo irá manter a RAM da geração anterior.
meu jovem, reduzir de 4 para 3 seira mais que sensato, quem entende um pouco sabe que é exagero colocar tudo isso de RAM, a melhor coisa é trazer inovações em outros pontos...
Ser sensato é uma coisa, mas atualmente, pro marketing de um novo celular, ter números inferiores ao anterior é arriscar perder mercado.
Sensato pra vc. Qd vc tiver um Note 5 ou Note 7 em mãos vc me diga se é bom ou ñ muita RAM. Se as empresas tivessem esse seu pensamento RETRÓGRADO, ainda estaríamos utilizando máquinas Olivetti. A tecnologia caminha a passos largos pra frente, e não como vc acha que deveria ser.
quando eu tiver um s7 lhe falo , já tive um note 5, e inclusive o S6 e note 4 q tbm já tive deram um show trabalhando linearmente sem travar com frequência (porquê todo Samsung trava com essa rom TW), mas hoje estou com moto Force. Reforçando, se caso eu trocar pelo S7 lhe falo.
ah, - trocar essa rom TouchWiz já seria um avanço.... além de travada parece mais um arco- íris...
Um dia aprendo a travar um celular da Samsung rs... Nem meu primeiro Android Ace 1 não travava, imagina o atual Note 5. Qt ao visual da TW isso é uma questão pessoal, eu acho bom do jeito que está.
Quando descobrir, me fala para eu tentar travar o meu note 3 que até hoje nunca negou fogo...
Ñ sei o Note 1, mas tive do Note 2 ao 5 e nunca travou na minha mão. Mas como eu disse eu vou aprender e te falo Luiz Fernando rs...
Rapaz...Já tive o s6, note 5, s7 edge e hoje tenho um oneplus 3 e posso te falar que tem nada de sensato tirar ram de um sistema. O oneplus 3 simplesteme dá um banho no s7 edge isso porque o s7 edge, pra mim, está entre os melhores que já usei e a touchwiz nele é muito boa, nunca travou nada. Esse banho no desempenho com certeza tem um dedinho da maior quantidade de ram, não só por isso, mas que faz muuuuuuita diferença no multitarefa isso faz. ''Ah, meu note 5, s7 tem um ótimo multitarefa'' ok, mas tenta aliar um uso extremo no multitarefa com fluidez, sem mais ram não dá.
Benchmarks começam a ser cada vez mais duvidosos e tendenciosos à manipulação. A melhor forma de analisar um celular, é de usuário pra usuário; além de sites confiáveis. Os métodos mais válidos, acredito.
Em resumo:
Pelo SIM ou pelo NÃO, não acredite em informações de aparelhos que não esteja no mercado.
Eu nunca confiei nisso des do dia que com um simples moto G 1 eu consegui bater 45mil pontos com um kernel entao isso so mostra q numeros n querem dizer nada , prefiro compra o aparelho vendo videos e uso normal do que por numero de benchmark
Se eu confio em benchmarks?
Não confio, mas mesmo assim leio algumas matérias que mostram estes testes
E daí? Nunca me importei com benchmarks!
Por que falsificar benchmarks tornou-se tão fácil? Simples, para chamar a atenção do público/imprensa e consequentemente vender mais aparelhos.
Pois é, marketing indireto!