O Google abre o código-fonte de uma ferramenta usada para ativar recursos semelhantes ao modo retrato do Pixel 2

O Google lançou o código-fonte do DeepLab-v3, uma tecnologia de IA que pode ser usada para ativar o Portrait Modo na Câmera do Google, permitindo que os desenvolvedores usem a mesma tecnologia em seus próprios aplicativos para outros propósitos.

Atualização às 17h02 CST: O Google entrou em contato para esclarecer que a tecnologia do Modo Retrato em si não está sendo aberta originado, mas sim, que a tecnologia que torna isso possível - segmentação semântica de imagens - está agora aberta originado. O título foi alterado para refletir esta correção.

A maioria das pessoas concorda que a família Pixel 2 tem as melhores câmeras em qualquer smartphone no momento. O hardware da câmera em si é ótimo, mas a maior parte da mágica acontece no lado do software. Por exemplo, o recurso HDR+ torna quase qualquer câmera é melhor quando é portado para outros telefones. Um novo recurso de software no Pixel 2 é o “Modo Retrato”. Ele identifica você e desfoca o fundo para criar um efeito legal.

A câmera está usando segmentação semântica de imagem para conseguir isso. Basicamente, ele categoriza cada pixel com um rótulo como “pessoa” ou “céu”. Isso ajuda a câmera a diferenciar entre uma pessoa em primeiro plano e o céu ao fundo. O Google lançou essa tecnologia como código aberto, o que significa que os desenvolvedores podem usar a mesma tecnologia em seus próprios aplicativos. O Modo Retrato é apenas um exemplo de como essa tecnologia pode ser usada. Os desenvolvedores podem fazer coisas ainda mais legais.

Esta versão inclui modelos DeepLab-v3+ construídos sobre uma poderosa arquitetura de backbone de rede neural convolucional (CNN) [2, 3] para obter resultados mais precisos, destinados à implantação no lado do servidor. Como parte desta versão, também estamos compartilhando nosso código de treinamento e avaliação do modelo Tensorflow, como bem como modelos já pré-treinados na segmentação semântica de benchmark Pascal VOC 2012 e Cityscapes tarefas.


Fonte: Pesquisa Google