No se puede desactivar, al menos de forma oficial. Otra cosa es con root, fastboot, formateando, blablabla, que ahí no entro al no tener ni idea.
Lo de pérdida de rendimiento... quizás hace años pero hoy en día ya debe ser insignificante. No debe merecer la pena.