De eerste beta-versie van iOS 13.2 is uit, daarin zit onder andere Deep Fusion. Hierbij wordt de A13 Bionic processor van de iPhone 11 gebruikt om met neural image processing uit 9 beelden er 1 te destilleren. Daarmee gaat de kwaliteit enorm omhoog, ondanks de relatief lage resolutie van deze iPhones.

Hoe Deep Fusion precies werkt kan je hieronder lezen, maar belangrijker is natuurlijk hoe goed de resultaten zijn. En de eerste die daarvan naar buiten komen zijn indrukwekkend, de beelden zijn nog een stuk scherper en er is veel meer detail. Dat betekent trouwens ook grotere bestanden: een Smart HDR foto met een iPhone Xr genereert een 1,4 MB HEIC bestand, een Deep Fusion foto met een iPhone 11 betekent een 2,6 MB HEIC bestand. Dus bijna een verdubbeling in grootte. In de tweets hieronder een aantal voorbeelden.

iOS 13.2 - Deep Fusion
The difference is in the details pic.twitter.com/Jv4cNSJm2A

— cino (@domenicopanacea) October 2, 2019

Invalid Tweet ID

Very first tests of #DeepFusion on the #iPhone11 pic.twitter.com/TbdhvgJFB2

— Tyler Stalman (@stalman) October 2, 2019

Hieronder de stappen die worden gebruikt bij het maken van een Deep Fusion foto. Let op, dit werkt alleen als je het vastleggen van data buiten het frame uit hebt staan, die twee opties gaan niet samen (waarschijnlijk is dit de reden dat Apple dat standaard bij foto's uit heeft staan). Verder helpt dit ook om ruis nog beter weg te filteren, digitale ruis zal in verschillende foto’s nooit op exact dezelfde plek ontstaan.


klik op de afbeelding voor een grotere versie

• Tegen de tijd dat jij op de sluiterknop drukt heeft de camera al vier opnames met een snelle sluitertijd gemaakt om ervoor te zorgen dat beweging scherp wordt vastgelegd, en vier standaard-opnames. Als je op de sluiterknop drukt wordt er een opname gemaakt met een langere sluitertijd, om zoveel mogelijk detail vast te leggen.
• De drie drie standaard-opnames en die met de langere sluitertijd worden samengevoegd in dat Apple ‘synthetic long’ noemt. Dit proces is fundamenteel anders dan Smart HDR.
• Deep Fusion kiest het beeld met een korte sluitertijd met het meeste detail, en voegt die samen met de “synthetic long’-versie. Waarbij Smart HDR uiteindelijk veel meer beelden samengevoegd worden gaat het bij Deep Fusion uiteindelijk om ‘maar’ twee beelden. Maar één van die twee is dus samengesteld uit in de stap hiervoor samengevoegde beelden. Daarbij wordt de ruisonderdrukking ook op een andere manier uitgevoerd.
• Daarna gaan de beelden door vier processen, pixel voor pixel, waarbij iedere stap voor meer detail moet zorgen. Daarbij krijgen bijbeeld de lucht en muren de minste aandacht, terwijl op huid, haar, stoffen etc. juist de nadruk ligt. Hiermee worden de beslissingen gemaakt hoe beide beelden samengevoegd worden, waarbij de kleuren, luminantie en details van de beste gekozen worden.
• Het finale plaatje wordt gegenereerd.

met dank aan forumlid 'VwVanFan', die dit nieuws als eerste meldde



Bereik MacFreak’s 85.000 maandelijkse bezoekers met sponsoring, advertorials of pagelinks.
Reach MacFreak’s 85.000 monthly visitors through sponsoring, advertorials or pagelinks.

en dit is dus allemaal software die deze beelden beter zichtbaar maakt. Indrukwekkend.