Google ha publicado el código fuente de DeepLab-v3, una tecnología de inteligencia artificial que se puede utilizar para habilitar Portrait Modo en la cámara de Google, que permite a los desarrolladores utilizar la misma tecnología en sus propias aplicaciones para otras propósitos.
Actualización a las 05:02 p.m. CST: Google se ha acercado para aclarar que la tecnología del modo retrato en sí no está abierta fuente, sino que la tecnología que lo hace posible (la segmentación semántica de imágenes) ahora está abierta de origen. El título ha sido modificado para reflejar esta corrección.
La mayoría de la gente está de acuerdo en que la familia Pixel 2 tiene las mejores cámaras en cualquier teléfono inteligente en este momento. El hardware de la cámara en sí es excelente, pero la mayor parte de la magia ocurre en el lado del software. Por ejemplo, la función HDR+ hace casi cualquier cámara mejor cuando es portado a otros teléfonos. Una nueva característica de software del Pixel 2 es el "Modo retrato". Te identifica y difumina el fondo para crear un efecto genial.
La cámara utiliza segmentación de imágenes semántica para lograr esto. Básicamente, clasifica cada píxel con una etiqueta como "persona" o "cielo". Esto ayuda a la cámara a diferenciar entre una persona en primer plano y el cielo en segundo plano. Google lanzó esta tecnología como código abierto, lo que significa que los desarrolladores pueden usar la misma tecnología en sus propias aplicaciones. El modo retrato es sólo un ejemplo de cómo se puede utilizar esta tecnología. Los desarrolladores pueden hacer cosas aún más interesantes.
Esta versión incluye modelos DeepLab-v3+ creados sobre una potente arquitectura troncal de red neuronal convolucional (CNN) [2, 3] para obtener resultados más precisos, destinados a la implementación del lado del servidor. Como parte de esta versión, también compartimos nuestro código de evaluación y capacitación del modelo Tensorflow, como así como modelos ya entrenados previamente en Pascal VOC 2012 y segmentación semántica de referencia de Cityscapes tareas.
Fuente: Investigación de Google