Correcto, tienes que clonar y poner como modulo.
git clone, y después en Android Studio, File -> Import module... y seleccionas el módulo de la libreria (ojo, suelen venir muchas con la libreria y el sample. Asegúrate de seleccionar el módulo de la libreria!)