Tienes varias opciones a elegir, unas más laboriosas que otras:
1. No tocar nada del firmware, dejar el terminal tal cual esta y deshabilitar las apps que no usas, varias del sistema no se pueden deshabilitar.
2. Usar una ROM stock y ser Root, deshabilitar las apps que no usas incluyendo las del sistema, siendo Root puedes realizar más cosas para optimizar el sistema, p.e.j instalar Xposed y sus módulos.
3. Usar custom ROM, ya sea basadas en stock o AOSP, la versión de Android influye mucho, las versiones superiores tienden a consumir más batería y RAM (puedes ir a la última pero sentirás el impacto en la batería).
Como te ha mencionado @
Rafasc99, KitKat es excelente, pero si quieres Lollipop recomiendo la ROM MaximusHD (fluida, estable y con excelente autonomía).
Para que estés más enterado de la scene revisa el subforo ROMs y desarrollo.
Saludos
