Shinden, depende de cómo hagas el formateo a EXT4... Si lo haces mediante ROM (tipo GanaROM) ella sola te hace un backup y luego te lo restaura.
No es necesario intercambiar las SDs, pero por lo menos yo lo aconsejo, ya que así dispones de mas memoria para apps (juegos, GPSs...)