Google a lansat codul sursă pentru DeepLab-v3, o tehnologie AI care poate fi folosită pentru a activa Portrait Modul pe Camera Google, permițând dezvoltatorilor să folosească aceeași tehnologie în propriile aplicații pentru alte aplicații scopuri.
Actualizare 17:02 CST: Google a contactat pentru a clarifica faptul că tehnologia Mode Portrait în sine nu este deschisă sursă, ci mai degrabă că tehnologia care face posibilă – segmentarea semantică a imaginii – este acum deschisă sursă. Titlul a fost modificat pentru a reflecta această corecție.
Majoritatea oamenilor sunt de acord că familia Pixel 2 are cele mai bune camere de pe orice smartphone în acest moment. Hardware-ul camerei în sine este grozav, dar cea mai mare parte a magiei se întâmplă pe partea software. De exemplu, caracteristica HDR+ face aproape orice cameră mai bună când este portat pe alte telefoane. O nouă funcție software pe Pixel 2 este „Modul Portret”. Te identifică și estompează fundalul pentru a crea un efect cool.
Camera utilizează segmentarea semantică a imaginii pentru a realiza acest lucru. Practic, clasifică fiecare pixel cu o etichetă precum „persoană” sau „cer”. Acest lucru ajută camera să facă diferența între o persoană din prim plan și cerul din fundal. Google a lansat această tehnologie ca sursă deschisă, ceea ce înseamnă că dezvoltatorii pot folosi aceeași tehnologie în propriile aplicații. Modul Portret este doar un exemplu al modului în care această tehnologie poate fi utilizată. Dezvoltatorii pot face și mai multe lucruri interesante.
Această versiune include modele DeepLab-v3+ construite pe o arhitectură de coloană vertebrală puternică a rețelei neuronale convoluționale (CNN) [2, 3] pentru cele mai precise rezultate, destinate implementării pe server. Ca parte a acestei ediții, împărtășim în plus codul nostru de instruire și evaluare a modelului Tensorflow, ca precum și modele deja antrenate în prealabil pe Pascal VOC 2012 și segmentarea semantică de referință Cityscapes sarcini.
Sursa: Google Research