Como idea, esta muy bien pero para hacer eso, sin tocar ningun boton... el telefono tendria que estar siempre escuchando por el microfono... lo cual no es viable.
Es decir, siempre tendrias que apretar algun botón para activar la escucha del telefono... y ya que tendrias que tocar un boton... pues descuelgas, no?