Sí, si pasas las apps a la sd y la sd no es de clase muy alta se realentizarán, porque la memoria interna es más rápida.

Por eso los nexus no tienen ampliación sd, porque google quiere que vaya muuuy fluido. Lo mejor es enlazar los datos para ahorrar espacio interno pero no laggear el móvil.