Puedes entrar a Samsung Cloud desde el navegador del PC y desde allí, borrar la copia de seguridad de los contactos de la nube para que no vuelva a sincronizártelos después de borrarlos en el terminal.
El enlace para entrar desde el pc sería este:
https://support.samsungcloud.com/#/logout