Desde Xataka Android hemos podido ver cómo Google con cada actualización de Android anuncia mejoras en rendimiento, cuantificando las funciones donde más diferencia hay con su versión anterior pero sin dar una visión general.
Por ello hemos decidido hacer una prueba de uso general y los benchmarks que habitualmente pasamos a los terminales Android en nuestros análisis y comparar sobre un mismo dispositivo, Nexus 5, los resultados en la última versión de KitKat, la última de Lollipop y Marshmallow. ¿Se hará notar esa mejora de rendimiento que anuncia Google? Os adelantamos que os sorprenderéis.
Metodología y tests
Antes de empezar a mostraros datos y más datos, tablas y gráficos queríamos comentaros de dónde salen y cómo hemos decidido realizar las mediciones para los que piensen que aquí hay gato encerrado.
Cada medición ha sido realizada con el móvil cargado al 100% y desenchufado del cargador a un nivel de brillo medio (medido de 200 luxes, no de deslizador) y dejando un tiempo prudencial de unos 5 minutos entre pruebas para evitar que el calentamiento del chip y el throttling hagan aparición entre las mediciones. Una vez pasada la prueba, se vuelve a cargar el terminal y se desconecta de la luz para seguir con la siguiente pasada de la prueba o el próximo test.
En cada prueba pasada hemos hecho tres mediciones y hemos utilizado el valor medio de las tres como valor final de la prueba, minimizando así mediciones fuera de lugar. Todas las pruebas a excepción de la de la duración de batería han sido medidas tres veces.
El terminal utilizado ha sido un Nexus 5, modelo de 16 GB, al cual hemos flasheado con las distintas versiones oficiales de Android, configurado la cuenta Gmail, instalado benchmarks e ido pasando los tests.
Una vez aclarado todo vamos a lo interesante, los resultados, que ya te avanzamos que en algunos apartados son, más que curiosos, sorprendentes.
Resultados
Aquí dejamos las "pruebas del delito" para en el próximo apartado comentar concienzudamente los mismos comparando todos los datos.
De primeras a continuación tenéis una tabla de resumen de cada versión de Android y, por no hacer un post interminable, podréis ver las capturas de pantalla y los valores de cada medición pulsando los botones de mostrar resultados completos.
Android 4.4.4
| Resultados | Nexus 5 Android 4.4.4 |
|---|---|
| Quadrant | 8.678 |
| Epic Citadel | 51,3 |
| PCMark | Work Performance 3.953
|
| Antutu | 33.629 |
| 3DMark | Ice Storm Unlimited 15.133 |
| Vellamo | Chrome Browser 3.226 Metal 1.410 Multicore 1.628 |
Android 5.1.1
| Resultados | Nexus 5 Android 5.1.1 |
|---|---|
| Quadrant | 12.079 |
| Epic Citadel | 49 |
| PCMark | Work Performance 4.780
|
| Antutu | 35.214 |
| 3DMark | Ice Storm Unlimited 17.056 |
| Vellamo | Chrome Browser 2.982 Metal 1.199 Multicore 1.588 |
Android 6.0 (DP3)
| Resultados | Nexus 5 Android 6.0 |
|---|---|
| Quadrant | 12.007 |
| Epic Citadel | 48,4 |
| PCMark | Work Performance 4.575
|
| Antutu | 23.134* (prueba 3D no concluida) |
| 3DMark | Ice Storm Unlimited 15.711 |
| Vellamo | Chrome Browser 2.813 Metal 1.159 Multicore 1.611 |
¿Mejora de rendimiento? Claramente no
Aquí pasamos a comentar detalladamente la mejora de rendimiento o no según pruebas y distintos apartados hardware. La comparación será principalmente con Android Lollipop, es decir, la versión predecesora, aunque dejaremos algunas notas generales frente a KitKat con el que, de manera general, se nota más diferencia frente a estas versiones Android posteriores.
| Resultados Nexus 5 | Android 4.4.4 | Android 5.1.1 | Android 6.0 DP3 |
|---|---|---|---|
| Quadrant | 8.678 | 12.079 | 12.007 |
| Epic Citadel | 51,3 | 49 | 48,4 |
| PCMark | Work Performance 3.953
| Work Performance 4.780
| Work Performance 4.575
|
| Antutu | 33.629 | 35.214 | 23.134* |
| 3DMark | Ice Storm Unlimited 15.133 | Ice Storm Unlimited 17.056 | Ice Storm Unlimited 15.711 |
| Vellamo | Chrome Browser 3.226 Metal 1.410 Multicore 1.628 |
Chrome Browser 2.982 Metal 1.199 Multicore 1.588 | Chrome Browser 2.813 Metal 1.159 Multicore 1.611 |
Antes de nada queremos explicar ese asterisco de Antutu por el que os estáis preguntando:
Simplemente dejamos constancia de un error en el apartado 3D del benchmark por el cual no se copian los resultados de dicha prueba y se reporta 0 como resultado, de ahí la baja puntuación.
Seguramente Antutu actualice versión cuando llegue Android 6.0 final aunque visto el rendimiento 3D en pruebas como 3DMark apostamos a una pequeña bajada de rendimiento frente a Lollipop en este apartado.
Hemos querido dejar constancia de Kitkat (4.4.4) como plataforma estable y más que depurada y pulida durante estos años que nos lleva acompañando (anunciado en octubre 2013) aunque la gran batalla la tenemos aquí frente a Android Lolipop 5.1.1 que será lo que usemos como rendimiento de referencia, léase el 100%.
Los porcentajes pretenden arrojar algo de luz frente a tanta cifra y para ello veremos en la siguiente tabla a izquierda y derecha de la columna será la mejoría (si es mayor que 100%) o no (si es menor que 100%) de KitKat vs Lollipop y de Marshmallow vs Lollipop.
| Resultados Nexus 5 | Android 4.4.4 | Android 5.1.1 | Android 6.0 DP3 |
|---|---|---|---|
| Quadrant | 71,84% | 12.079 | 99,4% |
| Epic Citadel | 104,6% | 49 fps | 98,57% |
| PCMark | 82,69%
78,92% | Work Perf 4.780
Battery 4h40m | 95,71%
98,21% |
| Antutu | 95,24% | 35.214 | 65,69% * (rondaría el 96%) |
| 3DMark | 88,72% | Ice Storm Unlimited 17.056 | 92,11% |
| Vellamo | 108,18% 117,59% 102,51% |
Chrome Browser 2.982 Metal 1.199 Multicore 1.588 | 94,33% 96,66% 101,44% |
Como se puede ver en la tabla comparativa anterior NO se puede afirmar que haya mejora de rendimiento general, quizá en ciertos apartados de algunos benchmarks sí, pero son mejoras infinitesimales.
Si echáis un ojo a los resultados completos, parece que Android 6.0 muestra una mejora de rendimiento en la gestión multinúcleo como vemos en Vellamo, reflejado en la gráfica anterior. Sin embargo, si desgranamos una de las pruebas más completas, Antutu, nos damos cuenta de que el apartado multitarea así como el rendimiento que produce cada núcleo queda por detrás de los resultados obtenidos en Lollipop.
El resto de pruebas muestra un claro posicionamiento detrás de Lollipop, aunque equiparable en muchas de ellas, e incluso hay algunas pruebas en las que el antiguo Android KitKat les da un repaso a las nuevas versiones. Vellamo es un test que utiliza escenarios reales de testeo, es decir, abre aplicaciones como Chrome y realiza carga de webs, navegación, simulando un uso natural y aquí parece que Google todavía tiene apartados que pulir.
Lollipop dio un gran salto adelante en rendimiento y ahora toca explorar nuevas funcionalidades
Si miramos el apartado gráfico 3D nos damos cuenta de que a Android 6.0 aún le falta algo por pulir ya que una de las pruebas más exigentes de este apartado, 3DMark, tiene un rendimiento notablemente inferior a Android 5.1.1. También hay que mencionar que el rendimiento del motor gráfico Unreal, utilizado por Epic Citadel, sigue funcionando mejor en KitKat que en Lollipop o Marshmallow. Siendo el resultado de este último muy parejo aunque por detrás de Lollipop.
Queremos dejar constancia que una de las mejoras más notables de rendimiento en Android se dio en Lollipop al imponer como estándar la máquina javascript ART y en la mayoría de test se hacer notar. Ese salto de rendimiento no se encuentra a la hora de llegar a Marshmallow.
Con Lollipop también llegó el soporte de 64 bits, pero para comprobar la mejora de rendimiento se necesita una CPU de 64 bits y recordamos que Nexus 5 montaba un Snapdragon 800, potente quad-core, pero con arquitectura de 32 bits. Esa mejora de rendimiento puede llegar hasta un 15-20% en caso de disponer un chip de 64 bits que antes corría en Kitkat y damos paso a una versión de Android posterior optimizada para 64 bits.
Android 6.0 mejora notablemente la autonomía en reposo y consigue resultados equiparables a Lollipop usando el móvil
Tema autonomía, echemos un ojo a los resultados de PCMark, como se puede ver el trabajo duro se hizo ya con el salto a Lollipop. Con esta nueva versión hemos notado una pequeña caída de 5 minutos de pantalla encendida pero lo que no hemos comentado hasta ahora es que la gran mejora de Android 6.0 en el apartado de la batería llega en standby y es que el Nexus 5 tiene un consumo ínfimo en reposo comparado incluso con Lollipop.
Esta mejora llega de la mano de un sistema de gestión que han bautizado como Android Doze: en dos días en standby (sin SIM, pero con Wi-Fi y sincronización Gmail) el Nexus 5 sólo perdió un 9% de batería frente a un 24% de Android 5.1.1.
Otro punto a tratar es el tiempo de arranque y de apagado de Android 6.0 frente a Android 5.1.1. Tal y como comentamos en nuestra metodología hemos realizado tres mediciones y a continuación os dejamos la tabla:
| Resultados Nexus 5 | Android 5.1.1 | Android 6.0 DP3 |
|---|---|---|
| Tiempo apagado | 13,5 segundos (13,87 / 14,43 / 13,21) | 8,2 segundos (18,59 / 3,54 / 2,49) |
| Tiempo arranque | 37,7 segundos (42,02 / 36,75 / 34,35) | 35,69 segundos (44,27 / 32,73 / 30,07) |
| RAM disponible | 1.204 MB (64%) | 1.212MB (64%) |
Como se puede ver en las gráficas los resultados son muy parejos, pero quizá sí queremos mencionar que el apagado, según hemos notado a la hora de utilizarlo es más instantáneo en Android 6.0 que en Lollipop. Por lo demás, vemos que son resultados muy similares.
Android 6.0 cargado de novedades, no rinde más
Vistas las pruebas de manera general y una vez se indaga en los resultados nos damos cuenta de que Android 6.0 no va a pasar a la historia como una de las versiones Android con mayor aumento en rendimiento, dado que el rendimiento es en el mejor de los casos parejo a Lollipop.
Donde sí va a dar un golpe sobre la mesa es varios puntos:
- Mejora de autonomía de cara al usuario final gracias al menor consumo en reposo vía Android Doze.
- Estandarización de sistemas de pago, Android Pay.
- Soporte nativo de lectores de huellas digitales que mejorará la seguridad del smartphone y permitirá utilizar las huellas como sistema de autorización de entrada e incluso de aprobación de pagos.
- Now on touch traerá consigo una integración más profunda de Google Now en el sistema ya que podrás sacar partido del mismo dentro de cualquier aplicación, y hará un uso contextual de la situación para ofrecer información o ayuda al usuario.
El resto de características no serán tan diferenciales aunque sí que será con esta nueva versión con la que veremos la llegada / desembarco de smartphones con conector de carga USB-C. Tendremos que prepararnos para reabastecer nuestro arsenal de cables con nuevos accesorios con este nuevo conector reversible que promete, también, una carga más rápida.
Cuando esté disponible la versión final de Android 6.0 para Nexus 5 retomaremos esta comparativa para ofrecer cifras finales de rendimiento, pero todo apunta a que la versión DP3 será muy similar a la final en este apartado.
En Xataka | Las 32 novedades de Android M.
Ver 9 comentarios