La foto, o carátula del disco, es parte de la información que contiene el archivo de música.
Esta información se almacena en un conjunto de etiquetas que se conocen como TAG's.

Para añadir o eliminar estos datos necesitas un editor de TAG's. En mi opinión el mejor es MP3TAG y además es gratuito. Lo puedes encontrar fácilmente en Google.

Una vez instalado abre el archivo con el MP3TAG, eliminas la foto y guardas el archivo. Así de fácil. Verás que el funcionamiento del programa es muy intuitivo.

Saludos.