Google heeft de broncode vrijgegeven voor DeepLab-v3, een AI-technologie die kan worden gebruikt om Portrait in te schakelen Modus op de Google Camera, waardoor ontwikkelaars dezelfde technologie in hun eigen apps voor anderen kunnen gebruiken doeleinden.
Update 17:02 uur CST: Google heeft contact opgenomen om duidelijk te maken dat de portretmodustechnologie zelf niet open is maar dat de technologie die dit mogelijk maakt – semantische beeldsegmentatie – nu open is afkomstig. De titel is aangepast om deze correctie weer te geven.
De meeste mensen zijn het erover eens dat de Pixel 2-familie momenteel de beste camera's op elke smartphone heeft. De camerahardware zelf is geweldig, maar de meeste magie gebeurt aan de softwarekant. De HDR+-functie maakt bijvoorbeeld vrijwel elke camera beter wanneer het overgezet naar andere telefoons. Een nieuwe softwarefunctie op de Pixel 2 is ‘Portretmodus’. Het identificeert jou en vervaagt de achtergrond om een cool effect te creëren.
Om dit te bereiken maakt de camera gebruik van semantische beeldsegmentatie. Kortom, het categoriseert elke pixel met een label zoals 'persoon' of 'lucht'. Hierdoor kan de camera onderscheid maken tussen een persoon op de voorgrond en de lucht op de achtergrond. Google heeft deze technologie als open source uitgebracht, wat betekent dat ontwikkelaars dezelfde technologie in hun eigen apps kunnen gebruiken. De portretmodus is slechts één voorbeeld van hoe deze technologie kan worden gebruikt. Ontwikkelaars kunnen nog meer coole dingen doen.
Deze release bevat DeepLab-v3+-modellen die zijn gebouwd bovenop een krachtige convolutioneel neuraal netwerk (CNN) backbone-architectuur [2, 3] voor de meest nauwkeurige resultaten, bedoeld voor implementatie op de server. Als onderdeel van deze release delen we bovendien onze Tensorflow-modeltraining en evaluatiecode, as evenals modellen die al vooraf zijn getraind op de semantische segmentatie van Pascal VOC 2012 en Cityscapes taken.
Bron: Google Onderzoek