En tu caso no tendrás ningún problema siempre que el cargador sea de calidad, los de los chinos por ejemplo muchas veces dañan los aparatos.
No te preocupes por el amperaje, tanto el nexus como el resto de móviles limitan la la cantidad de energía que reciben así que no, no te cargará más rápido ni te estropeará la batería.