Porträttläge på iPhone SE Endast vid maskininlärning

Företagets nya AppleiPhone SE är företagets första – och hittills enda – iPhone som enbart förlitar sig på maskininlärning för att uppskatta porträttlägesdjupet.

iPhone SE kan skapa djupkartor från en enda 2D-bild med hjälp av maskininlärning. Kredit: Halide

iPhone SE, som släpptes i april, verkar till stor del vara en klon av iPhone 8, ända ner till den monokulära kameran med en lins. Under huven finns det dock mer att uppskatta djupet än någon annan iPhone innan den.

Enligt ett blogginlägg från tillverkarna av Halide-kameraappen är iPhone SE den första enheten i Apples sortiment som använder “Monoocular Depth Estimation”. Det betyder att den första iPhonen kan skapa porträttsuddare med bara en enda 2D-bild.

I tidigare iPhones krävde porträttläget minst två kameror. Det beror på att den bästa källan till djupinformation länge har jämfört två bilder som kommer från två lite olika platser. När systemet jämför dessa bilder kan det separera motivet på bilden från bakgrunden, vilket möjliggör en “bokeh-effekt”.

iPhone XR ändrade det och introducerade stöd för porträttläge genom användning av sensorns “brännpixlar”, som kan producera råa djupkartor. Men medan den nya iPhone SE har fokuspixlar, saknar dess äldre hårdvara den täckning som behövs för djupkartläggning.

Halides Ben Sandofsky skriver: “Den nya iPhone SE kan inte använda fokuspixlar, eftersom dess äldre sensor inte har tillräckligt med täckning. En iFixit-nedbrytning avslöjade på måndagen att iPhone SE:s kamerasensor i huvudsak är utbytbar för iPhone 8’NS.

Istället genererar iPhone på nybörjarnivå djupkartor helt och hållet genom maskininlärning. Det betyder också att den kan producera foton i porträttläge från både den främre och bakre kameran. Det är verkligen möjligt tack vare flaggskeppet A13 Bionic-chipset under huven.

Halide påpekar att djupinformationen inte är perfekt, men det är en imponerande bedrift med tanke på de relativa hårdvarubegränsningarna hos den tre år gamla kamerauppsättningen med en sensor. På samma sätt fungerar Porträttläge på iPhone SE bara på människor, men Halide säger att den nya versionen av appen tillåter bokeh-effekter på icke-mänskliga motiv på iPhone SE.

Källa: Appleinsider