Espero que tampoco uses Whatsapp que lo primero que hace es copiar toda la agenda a un servidor de USA... Ahora al menos creo que va cifrado y se preocupan un poco más por la seguridad, pero en su día cualquiera podía ver los datos analizando el tráfico de una red pública.
Los servicios de sincronización de todas formas son muy útiles, especialmente cuando tienes varios dispositivos. Si no te gusta el de Google supongo que puedes usar alguna solución basada en SyncML con algún servidor de pago (es lo que hacía con los Symbian hace unos añitos).