Me parece que estamos confundiendo Android TV con los aparatos chinos que incorporan Android (version telefono/tablet).
Android TV es lo que lleva el Nexus Player y el Nvidia Shield. Tiene una interfaz adaptada a la tele y ademas tiene incorporado Chromecast para poder enviar contenido desde el telefono, tablet o pc.
No se necesita ni teclado ni raton, y se controla con el mando que trae, ademas de poder conectar por bluetooth un joystick para videojuegos.
Y en cuanto a los juegos dentro de la tienda de apps de Android TV tienes separados los que se pueden jugar con el mando normal y los que necesitan de un joystick.
Con un chromecast no vas a poder jugar a juegos como Asphalt o Rayman debido a que la imagen suele ir con algo de retardo y no tan fluido. Con un Adnroid TV si porque están adaptados a la tele.
Resumiendo: Chromecast te permite enviar contenido desde tu telefono, tablet o pc a la tele. Android TV tiene una interfaz, apps y juegos adaptados para la tele, ademas de incluir las funciones de cast de Chromecast.
Aca dejo un video de Android TV en un Nexus Player.