Me suena que hay un hilo en la sección de accesorios donde se habló de esto y al parecer nuestro móvil tiene un ligero problema con el acelerometro/giroscopio (No se cual) y no se estabiliza muy bien, sale todo vibrando, así como el imán que integran las cardboard para ciertas funciones, que tampoco le funcionaba bien.
Recomendaría probarlo en otro móvil, ya que por lo que recuerdo haber leído, en este no iba del todo fino...