Cita: Originalmente Escrito por
santinhos
Me refiero a que no es un benchmark equiparable a Antutu, por ejemplo, como comenta el compañero, que no deja de ser un software que cualquiera puede descargar en su terminal y probar ejecutándose de forma automática, dando resultados distintos incluso en terminales idénticos, y del que no se puede extrapolar el funcionamiento o rendimiento de un móvil en sentido literal, ya que no calcula multitud de parámetros que influyen en ello. Benchmarks que mucha gente sí interpreta de esta forma.
DXOMark no es un software ejecutable en el móvil. Son multitud de pruebas físicas realizadas por gente especializada en el mundo de la imagen que luego son valoradas, y de las que deriva ese ranking.
Si los móviles de ahora tienen más capacidades/funciones que los de hace 3 años es lógico que esas pruebas se vayan actualizando y aumentando. No es lógico equiparar puntuaciones de hace 3 años a las actuales, ya que 85 puntos de hoy no son 85 puntos hace 3 años. Al igual que 1000 pesetas hace 17 años no eran lo mismo que 1000 pesetas hace 35.
Normalmente hay motivos para que un benchmark sintético saque puntuación diferente en dos móviles idénticos. Software, temperatura, brillo en pantalla y cualquier sensor que reste voltaje al procesador, stepping del procesador (los números que salen en vertical cuando entras al recovery en tu samsung, no todos los procesadores salen igual de rápido o eficientes de fábrica), etc. Son de hecho pruebas bastante científicas. Calculan la fuerza bruta del procesador desde diferentes ángulos, y son relativamente buenos haciéndolo. Que a la gente le importe poco la metodología y no lea, no es culpa del benchmark.
También se puede aplicar a DXomaker el hecho de que haya parámetros que no evalúan, como el angular que ha dicho Superlopezz. El sesgo que pueden tener los benchmarks sintéticos lo tiene también éste.
Además, hay un punto de subjetividad, tienen pruebas "perceptivas" en el que un grupo de expertos asigna una puntuación al sub-test. Si fuera algo objetivo, necesitarían un experto, no un grupo.
Por último, la unidad de medida. ¿Qué es un punto de Antutu? ¿Qué es un punto de DXomark? El primero es objetivo pero altamente influenciable por las condiciones. El segundo es más subjetivo porque lo asignan unos señores tras ver una foto y debatir. Ninguna empresa de benchmark revela exactamente cómo se asignan sus puntos, qué peso tiene cada sub-test sobre el global, etc. normalmente estas medidas no son equiparables: un 50 no es el doble de nítico ni el doble rápido que un 100 en la mayoría de los casos.
Me hace gracia que siempre se critique a Antutu, sobre todo cuando cambiaron las puntuaciones que afectaron tanto a los Mediatek (creo que fue la versión 6.0); porque del mismo modo que lo hizo ayer DXomark, Antutu también publicó un artículo explicando su metodología y el motivo del cambio (demasiado peso al multi-núcleo. Analizaron las aplicaciones mas usadas y vieron que no usaban más de dos núcleos, así que replantearon todo el esquema de puntuaciones). Pero gusta poco leer. Para el que tenga curiosidad, no he encontrado la versión completa, pero:
http://www.antutu.com/en/doc/106921.htm
Lo dicho, como referencia está bien, pero no me extrañaría que haya un par de puntos arriba/abajo como margen de error/subjetividad de la página. Y sobre todo, es mucho más fiable comparar las puntuaciones por sub-test, que la puntuación global del dispositivo.