Sí se debería ocultar por defecto. Sea el canal beta o no de Chrome. Lo que ocurre es que solo se oculta cuando te desplazas hacia abajo de la pantalla y la barra se oculta por que se desplaza también para arriba. Cuando te desplazas para arriba vuelve a activarse.
Edito: también pasa que mientras que carga la página, aunque parezca cargada entera visualmente, todavía quedan elementos por cargar y la barra permanece mientras.