Para nada, el problema lo tendrias al contrario (si dieran más de los 5,1, pero mucho mucho mas).
Tu piensa que la conectas a puertos USB de ordenadores y, si encuentras un solo PC que te de los 5V exactos por el USB tendrás un milagro

.
Lo único es que si usas el cargador de 500mAh, tardará mucho mas en cargar que con el original. Pero servirte te sirven perfectamente.