Mas que la tarjeta clase 4, es posible que no vaya muy fina la particion ext4. Rehazla y dejala en ext3; si aun te sigue yendo mal prueba algún kernel distinto. Para tener memoria siempre disponible, usa el Autokiller, no un task killer. Descargalo y prueba a ponerlo en Strict por ejemplo.
Eso es lo que yo te recomendaría en principio, espero que vaya bien ;)
Lo primero es conseguir estabilidad, y despues empezar a jugar con otros parametros para gastar menos batería (usar kernels con mucho UV, distintas radios...)