A mi me ocurre como al OP, configuré el cacharro con mi cuenta en mi móvil, después envié una invitación a mi mujer, que se instaló el programa en su móvil, configuró voice match y... Nada, puede usarlo pero solo dice los eventos de mi cuenta.
Podría ser que no tenga que enviar invitación y configurarlo en su móvil como si fuese un nuevo aparato? Otra cosa no se me ocurre ya.