Samsung explica la «magia» detrás del modo Retrato del Galaxy S21

[Nonamed]

Samsung explica la «magia» detrás del modo Retrato del Galaxy S21



Leemos en teknofilo.com

"A día de hoy, el procesado de las imágenes captada por las cámaras de nuestros smartphones es tan importante como la calidad de la imagen captada en primer lugar. Samsung ha publicado una explicación bastante detallada de cómo la serie Galaxy S21 utiliza el procesado mediante IA para tomar retratos. El procesamiento del modo Retrato es bastante sofisticado. Comienza con un proceso de segmentación para separar las partes de la imagen que son personas y fondo. De este modo, se puede aplicar más tarde el procesamiento correcto a cada elemento. Este «mapa de segmentación» se utiliza para crear un «mapa de semillas» aproximado. A continuación, el «Tri-map» resalta los límites entre el sujeto y el fondo. Después, el «mapa Matte» traza los detalles finos dentro de ese borde: evita que el pelo y los rasgos faciales se mezclen con el fondo."

fuente: teknofilo.com

[Nonamed]

https://www.teknofilo.com/samsung-ex...el-galaxy-s21
Ir al link original: https://www.teknofilo.com/samsung-explica-la-magia-detras-del-modo-retrato-del-galaxy-s21

[Andro]

Muy buen trabajo Tekno.. y bonitas fotos. La verdad es que el resultado en esa segunda foto es espectacular. Muy buena camara la de esos S21

[CapitanSevilla]

Al ser por IA (y no un hardware específico) todas estas mejoras podrían llegar a las gamas anteriores, no? (otra cosa es que les interese sacarlo).

Ya podrían mejorar el procesado de la cámara frontal de los S20 FE, que da penica (y casi todo es software, que por lo visto con la GCAM mejora bastante).

[ZaWoK]

 Cita: Originalmente Escrito por CapitanSevilla

Al ser por IA (y no un hardware específico) todas estas mejoras podrían llegar a las gamas anteriores, no? (otra cosa es que les interese sacarlo).

Ya podrían mejorar el procesado de la cámara frontal de los S20 FE, que da penica (y casi todo es software, que por lo visto con la GCAM mejora bastante).

Entiendo que la gestión y control de la IA empleada va ligada al hardware del dispositivo de forma directa. Otra cosa es que un gama alta del año pasado lo puede mover...

[Teknofilo]

 Cita: Originalmente Escrito por Andro

Muy buen trabajo Tekno.. y bonitas fotos. La verdad es que el resultado en esa segunda foto es espectacular. Muy buena camara la de esos S21

Gracias, son fotos que no había publicado hasta ahora, ya que las tomé después de haber sacado el review del Galaxy S21 Ultra.


Me ha parecido buena idea publicarlas en este otro artículo como muestra del resultado de todo este procesamiento.

[BreoganN]

 Cita: Originalmente Escrito por CapitanSevilla

Al ser por IA (y no un hardware específico) todas estas mejoras podrían llegar a las gamas anteriores, no? (otra cosa es que les interese sacarlo).

Ya podrían mejorar el procesado de la cámara frontal de los S20 FE, que da penica (y casi todo es software, que por lo visto con la GCAM mejora bastante).

Aunque se aun modelo de red neuronal preentrenado, al aplicarlo a una nueva fotografía tiene igualmente que hacer muchísimos cálculos. Y también influye con que cámara se saque. Si tu red está preparada para fotografías con una tamaño 4.000 x 3.000 , y tu cámara no dispara en esa resolución no vas a tener tan buenos resultados aunque al final la interpoles o recortes para adecuarse a ese tamaño, porque estas aplicando un cambio que afectará al resultado de la operación.

[CapitanSevilla]

 Cita: Originalmente Escrito por BreoganN

Aunque se aun modelo de red neuronal preentrenado, al aplicarlo a una nueva fotografía tiene igualmente que hacer muchísimos cálculos. Y también influye con que cámara se saque. Si tu red está preparada para fotografías con una tamaño 4.000 x 3.000 , y tu cámara no dispara en esa resolución no vas a tener tan buenos resultados aunque al final la interpoles o recortes para adecuarse a ese tamaño, porque estas aplicando un cambio que afectará al resultado de la operación.

Si, pero bueno, una IA no dejar de ser un software; sobre todo si no está codificada para ejecutarse sobre un hardware específico (y con esto me refiero a procesadores especializados, no a sensores fotográficos), que no parece el caso. Otra cosa es que la hayan programado para tratar las fotos de X resolución o lo que sea, pero eso sigue siendo Software y se puede programar.

Es como las reediciones 4K de algunas pelis antiguas. No están grabadas todas con las mismas cámaras y formatos y no necesitan un hardware específico para adaptarse al 4K. Lo que hay es un Software adaptado que las re-escala y mejora según x condiciones o parámetros.

[BreoganN]

 Cita: Originalmente Escrito por CapitanSevilla

Si, pero bueno, una IA no dejar de ser un software; sobre todo si no está codificada para ejecutarse sobre un hardware específico (y con esto me refiero a procesadores especializados, no a sensores fotográficos), que no parece el caso. Otra cosa es que la hayan programado para tratar las fotos de X resolución o lo que sea, pero eso sigue siendo Software y se puede programar.

Es como las reediciones 4K de algunas pelis antiguas. No están grabadas todas con las mismas cámaras y formatos y no necesitan un hardware específico para adaptarse al 4K. Lo que hay es un Software adaptado que las re-escala y mejora según x condiciones o parámetros.

La clave de estas IA es su entrenamiento , si lo entrenas con cierto tipo de imágenes sus resultados con otras imagenes aún reescaladas y modificadas no será tan bueno.
No es tan sencillo, la cuestión de muchas pelis antiguas es que se usa el celuloide antiguo , se digitaliza y después se usa una red neuronal entrenada con muestras pasadas por el mismo proceso. Y por eso a veces cuando hay muchas fuentes con distintas resolución salen churros como las mejoras de la amenaza fantasma.

Créeme, que ojalá fuera tan fácil crear redes neuronales capaces de tragarse cualquier cosa, pero no.