No he acercado el oído para comprobarlo, pero teniendo en cuenta que el cargador no deja de ser un transformador, podría ser normal:
http://es.wikipedia.org/wiki/Magnetostricci%C3%B3n
Es común de los transformadores eléctricos (el ruido que escuchais cerca de una subestación eléctrica), pero la verdad no tenía ni idea de que con uno tan pequeño también se notase.