La RAM en uso no hace que vaya más lento el móvil, al contrario. Entonces no tiene por qué haber mala optimización. Además ahora Android te mantiene las apps abiertas después del reinicio por lo que se quedan en la RAM ocupandola.
Yo solo me preocuparía si el móvil te llega a ir más lento