Claro que podrías =) Dije esos tamaños mas que nada para que tuvieras mas espacio para ti.
De todas maneras, creo que es mucho swap, si bien el tuto lo dice, y es mejor tener "harto", yo ya pasé por tener 128mb, 256mb y 512mb, y no noté ninguna diferencia, de hecho ahora lo tengo sin swap, y no creo necesitarlo.
Saludos!