Los contactos de whatsapp se sincronizan con tu agenda de contactos del movil, por lo que no los puedes borrar sin borrarlos de la agenda. Es mas, aunque pudieras borrarlo, le seguirias apareciendo como contacto a esa persona mientras te tenga él en su agenda.
La unica forma de evitar comunicaciones de la persona es el bloqueo