Hasta donde yo se el baseband es el componente que se encarga de las comunicaciones (creo que sólo la parte de telefonía, es decir, llamadas, datos, sms, etc, pero wifi o bluetooth no). En general, o al menos en los teléfonos que yo he tenido, es un componente 'independiente' de la rom, que habla directamente con los componentes físicos.
Como es el que mantiene por ejemplo la cobertura, puede afectar tanto a rendimiento del teléfono (dependiendo de cuantos recursos consuma), a la estabilidad de las comunicaciones o al consumo de batería, con lo cual se supone que actualizando la versión pueden mejorar (o empeorar si la han cagado) esas partes.
Probablemente alguien con más conocimientos te pueda ampliar la información.
