Eso es porque en los jacks normales los puntos de contacto son de audio, y el el móvil tiene otro punto de contacto que es para información (cambiar de canción, subir volumen, descolgar, etc...).
Si metes los auriculares del teléfono en otro aparato sólo de audio pasará lo mismo, lo tines que dejar un poco salido para que se oiga bien.