PDA

Ver la Versión Completa : Samsung explica la «magia» detrás del modo Retrato del Galaxy S21

Nonamed
04/02/21, 07:14:52
Samsung explica la «magia» detrás del modo Retrato del Galaxy S21

https://www.galeriade.com/htcmania/data/media/2/oie_471422UHM6Urbq.jpg

Leemos en teknofilo.com
"A día de hoy, el procesado de las imágenes captada por las cámaras de nuestros smartphones es tan importante como la calidad de la imagen captada en primer lugar. Samsung ha publicado una explicación bastante detallada de cómo la serie Galaxy S21 utiliza el procesado mediante IA para tomar retratos. El procesamiento del modo Retrato es bastante sofisticado. Comienza con un proceso de segmentación para separar las partes de la imagen que son personas y fondo. De este modo, se puede aplicar más tarde el procesamiento correcto a cada elemento. Este «mapa de segmentación» se utiliza para crear un «mapa de semillas» aproximado. A continuación, el «Tri-map» resalta los límites entre el sujeto y el fondo. Después, el «mapa Matte» traza los detalles finos dentro de ese borde: evita que el pelo y los rasgos faciales se mezclen con el fondo."

fuente: teknofilo.com (https://www.teknofilo.com/samsung-explica-la-magia-detras-del-modo-retrato-del-galaxy-s21/)
Nonamed
04/02/21, 07:16:42
https://www.teknofilo.com/samsung-explica-la-magia-detras-del-modo-retrato-del-galaxy-s21/
https://www.teknofilo.com/samsung-explica-la-magia-detras-del-modo-retrato-del-galaxy-s21/
Andro
04/02/21, 08:45:20
Muy buen trabajo Tekno.. y bonitas fotos. La verdad es que el resultado en esa segunda foto es espectacular. Muy buena camara la de esos S21 :ok:
CapitanSevilla
04/02/21, 09:34:59
Al ser por IA (y no un hardware específico) todas estas mejoras podrían llegar a las gamas anteriores, no? (otra cosa es que les interese sacarlo).

Ya podrían mejorar el procesado de la cámara frontal de los S20 FE, que da penica (y casi todo es software, que por lo visto con la GCAM mejora bastante).
ZaWoK
04/02/21, 10:55:17
Al ser por IA (y no un hardware específico) todas estas mejoras podrían llegar a las gamas anteriores, no? (otra cosa es que les interese sacarlo).

Ya podrían mejorar el procesado de la cámara frontal de los S20 FE, que da penica (y casi todo es software, que por lo visto con la GCAM mejora bastante).

Entiendo que la gestión y control de la IA empleada va ligada al hardware del dispositivo de forma directa. Otra cosa es que un gama alta del año pasado lo puede mover...
Teknofilo
04/02/21, 11:15:06
Muy buen trabajo Tekno.. y bonitas fotos. La verdad es que el resultado en esa segunda foto es espectacular. Muy buena camara la de esos S21 :ok:


Gracias, son fotos que no había publicado hasta ahora, ya que las tomé después de haber sacado el review del Galaxy S21 Ultra.


Me ha parecido buena idea publicarlas en este otro artículo como muestra del resultado de todo este procesamiento.
BreoganN
04/02/21, 12:49:33
Al ser por IA (y no un hardware específico) todas estas mejoras podrían llegar a las gamas anteriores, no? (otra cosa es que les interese sacarlo).

Ya podrían mejorar el procesado de la cámara frontal de los S20 FE, que da penica (y casi todo es software, que por lo visto con la GCAM mejora bastante).




Aunque se aun modelo de red neuronal preentrenado, al aplicarlo a una nueva fotografía tiene igualmente que hacer muchísimos cálculos. Y también influye con que cámara se saque. Si tu red está preparada para fotografías con una tamaño 4.000 x 3.000 , y tu cámara no dispara en esa resolución no vas a tener tan buenos resultados aunque al final la interpoles o recortes para adecuarse a ese tamaño, porque estas aplicando un cambio que afectará al resultado de la operación.
CapitanSevilla
04/02/21, 12:57:40
Aunque se aun modelo de red neuronal preentrenado, al aplicarlo a una nueva fotografía tiene igualmente que hacer muchísimos cálculos. Y también influye con que cámara se saque. Si tu red está preparada para fotografías con una tamaño 4.000 x 3.000 , y tu cámara no dispara en esa resolución no vas a tener tan buenos resultados aunque al final la interpoles o recortes para adecuarse a ese tamaño, porque estas aplicando un cambio que afectará al resultado de la operación.

Si, pero bueno, una IA no dejar de ser un software; sobre todo si no está codificada para ejecutarse sobre un hardware específico (y con esto me refiero a procesadores especializados, no a sensores fotográficos), que no parece el caso. Otra cosa es que la hayan programado para tratar las fotos de X resolución o lo que sea, pero eso sigue siendo Software y se puede programar.

Es como las reediciones 4K de algunas pelis antiguas. No están grabadas todas con las mismas cámaras y formatos y no necesitan un hardware específico para adaptarse al 4K. Lo que hay es un Software adaptado que las re-escala y mejora según x condiciones o parámetros.
BreoganN
04/02/21, 21:16:47
Si, pero bueno, una IA no dejar de ser un software; sobre todo si no está codificada para ejecutarse sobre un hardware específico (y con esto me refiero a procesadores especializados, no a sensores fotográficos), que no parece el caso. Otra cosa es que la hayan programado para tratar las fotos de X resolución o lo que sea, pero eso sigue siendo Software y se puede programar.

Es como las reediciones 4K de algunas pelis antiguas. No están grabadas todas con las mismas cámaras y formatos y no necesitan un hardware específico para adaptarse al 4K. Lo que hay es un Software adaptado que las re-escala y mejora según x condiciones o parámetros.

La clave de estas IA es su entrenamiento , si lo entrenas con cierto tipo de imágenes sus resultados con otras imagenes aún reescaladas y modificadas no será tan bueno.
No es tan sencillo, la cuestión de muchas pelis antiguas es que se usa el celuloide antiguo , se digitaliza y después se usa una red neuronal entrenada con muestras pasadas por el mismo proceso. Y por eso a veces cuando hay muchas fuentes con distintas resolución salen churros como las mejoras de la amenaza fantasma.

Créeme, que ojalá fuera tan fácil crear redes neuronales capaces de tragarse cualquier cosa, pero no.