Wat is een AI-camera en hoe werkt AI-fotobewerking?

Kunstmatige intelligentie (AI) is overal, en als je nog geen AI-aangedreven smartphone hebt, zal je dat waarschijnlijk snel doen. Zelfs de software van je telefoon gebruikt AI om namens jou beslissingen te nemen. Adobe's Photoshop Camera, zojuist gelanceerd, gebruikt AI om objecten en scènes in uw foto's te identificeren en 'lenzen' (digitale effecten) voor te stellen voor een komische en creatieve impact.

Is het allemaal gewoon marketing overmoed, of is AI in een smartphone - en vooral in de camera - iets dat we allemaal zouden moeten nastreven? Nu de term AI steeds meer wordt gebruikt, niet alleen in cameratelefoons, maar in allerlei soorten camera's, loont het om te weten wat AI eigenlijk doet voor je foto's.

AI heeft de grenzen tussen beeldopname, beeldverbetering en beeldmanipulatie vervaagd. Het wordt gebruikt bij het bewerken van foto's, om de werkelijkheid te versmelten, te verbeteren en te 'vergroten', om intelligentere objectselecties te maken, verwerkingsparameters af te stemmen op het onderwerp en om u te helpen de afbeeldingen automatisch te vinden op basis van wat er in uw foto's staat in plaats van handmatige trefwoorden. en beschrijvingen. Het kijkt al naar wat je fotografeert en neemt zijn eigen beslissingen over hoe ermee om te gaan.

Welkom in de dappere nieuwe wereld van AI-camera's.

Wat is AI?

AI is een genre van informatica dat onderzoekt of we een computer kunnen leren denken of in ieder geval leren. Het is over het algemeen opgesplitst in subsets van technologie die proberen na te bootsen wat mensen doen, zoals spraakherkenning, spraak-naar-tekst dicteren, beeldherkenning en gezichtsscanning, computervisie en machine learning.

Er is een hele reeks modewoorden rond dit onderwerp. 'AI', 'deep learning', 'machine learning' en 'neutrale netwerken' zijn allemaal met elkaar verweven in deze nieuwe tak van technologie.

Wat heeft het met camera's te maken? Computationele fotografie en tijdbesparende fotobewerking, dat is wat. En spraakactivering.

Spraakgestuurde camera's

Het vermogen van een computer om menselijke spraak te begrijpen is een vorm van AI, en het sluipt de laatste jaren op camera's.

Smartphones bieden al een paar jaar Google Now en Siri aan, terwijl Alexa huizen binnenkomt via de Amazon Echo-speakers. Actiecamera's zijn de afgelopen jaren op die kar gesprongen, met de GoPro-actiecamera's en zelfs dashcams die acties kunnen ondernemen wanneer je eenvoudige zinnen uitspreekt zoals 'start video', 'maak foto' enzovoort.

Het is allemaal logisch, vooral voor actiecamera's waar handsfree bediening ze veel gemakkelijker te gebruiken maakt, maar is het echt AI? Technisch gezien is dat zo, maar tot voor kort werden spraakgestuurde gadgets simpelweg 'slim' genoemd. Sommige laten je nu toe om vrij specifieke dingen te zeggen, zoals ‘slow-motion video maken’ of ‘foto bij weinig licht maken’, maar een AI-camera moet iets meer doen dan dat de naam waardig is.

AI-software

AI gaat over nieuwe soorten software, in eerste instantie om het gebrek aan zoomlenzen van smartphones te compenseren. "Software wordt steeds belangrijker voor smartphones omdat ze een fysiek gebrek aan optica hebben, dus we hebben de opkomst gezien van computationele fotografie die een optische zoom probeert te repliceren", zegt imaging analist Arun Gill, Senior Market Analyst bij Futuresource Consulting. . "Top-end smartphones worden steeds vaker uitgerust met camera's met dubbele lens, maar de Google Pixel 3 gebruikt een enkele cameralens met computationele fotografie om een ​​optische zoomlens te repliceren en verschillende effecten toe te voegen."

Sinds de Pixel 3 zijn arrays met meerdere camera's en computationele beeldvorming samengevoegd om een ​​hybride technologie te produceren die veel van de scherptediepte en lenseffecten nabootst die je van grotere camera's krijgt. Een cameratelefoon is niet langer 'zomaar' een camera. Het is een reken-, analyse-, 'denkend' apparaat dat niet alleen de scène vastlegt zoals het is, maar ook hoe het denkt dat je het wilt, of hoe het denkt dat je zou moeten willen dat het is …

AI kan zijn alsof je een alleskende assistent hebt. Na een tijdje begin je je misschien af ​​te vragen wie de baas is.

De wereld is niet per se klaar voor de volledige implicaties van AI-camera's. Google gebruikte AI op zijn draagbare Google Clips-camera, die AI gebruikte om alleen bijzonder gedenkwaardige momenten vast te leggen en te bewaren. Het gebruikte een algoritme dat de basisprincipes van fotografie begreep, dus het verspilde geen tijd aan het verwerken van afbeeldingen die zeker niet de laatste snit van een hoogtepuntenrol zouden maken. Het verwijderde bijvoorbeeld automatisch foto's met een vinger in het frame en onscherpe afbeeldingen, en gaf de voorkeur aan foto's die voldoen aan het algemene rule-of-thirds-concept van hoe een foto moet worden ingekaderd.

Griezelig en controlerend? Sommigen dachten van wel. In ieder geval trok Google de camera in 2022-2023. De vraag is niet of AI krachtig genoeg is om de dingen te doen die we willen, maar of we er nog helemaal klaar voor zijn om zoveel macht over te dragen aan een machine … of aan het bedrijf dat bezit en exploiteert de AI-algoritmen erachter.

Wat is computationele fotografie?

Computationele fotografie is een digitale beeldverwerkingstechniek die algoritmen gebruikt om optische processen te vervangen, en het probeert de beeldkwaliteit te verbeteren door machine vision te gebruiken om de inhoud van een afbeelding te identificeren.

"Het gaat erom dat je studio-effecten die je met Lightroom en Photoshop bereikt, met één druk op de knop voor mensen toegankelijk maakt", zegt Simon Fitzpatrick, Senior Director Product Management bij FotoNation, dat veel van de computertechnologie levert aan cameramerken.

"Je kunt dus de huid gladstrijken en puistjes verwijderen, maar niet alleen door deze te vervagen - je krijgt ook textuur." In het verleden ging de technologie achter de modi ‘gladde huid’ en ‘schoonheid’ in wezen over het vervagen van het beeld om onvolkomenheden te verbergen. "Nu gaat het om het creëren van looks die geloofwaardig zijn, en AI speelt daarin een sleutelrol", zegt Fitzpatrick. "We gebruiken AI bijvoorbeeld om algoritmen te trainen over de kenmerken van de gezichten van mensen."

Al in de LG V30S ThinQ-telefoon gebruikt LG AI voor beeldvorming. Hiermee kan de gebruiker een professionele afbeelding selecteren op zijn Graphy-app en dezelfde witbalans, sluitertijd, diafragma en ISO toepassen. LG introduceerde ook Vision A, een engine voor beeldherkenning die gebruikmaakt van een neuraal netwerk dat is getraind op 100 miljoen afbeeldingen en die aanbeveelt hoe de camera moet worden ingesteld. Het detecteert zelfs reflecties in de foto, de hoek van de opname en de hoeveelheid beschikbaar licht.

Dieptesensoren en wazige achtergronden

In de afgelopen jaren hebben we gezien dat veel telefooncamera's met meerdere lenzen twee of meer lenzen gebruiken om esthetisch aantrekkelijke beelden te produceren met een wazige achtergrond rond het hoofdonderwerp. Mensen (en dus Instagram) houden van wazige achtergronden, maar in plaats van camera's met dubbele lens te gebruiken of een DSLR op te pakken en de scherptediepte handmatig te manipuleren, kan AI het nu voor je doen.

Machine learning, ook wel het 'bokeh'-effect genoemd (Japans voor onscherpte), identificeert het onderwerp en vervaagt de rest van de afbeelding. "We kunnen nu bokeh simuleren met behulp van op AI gebaseerde algoritmen die mensen segmenteren van voor- en achtergrond, zodat we een effect kunnen creëren dat veel lijkt op een portret dat in een studio is gemaakt", zegt Fitzpatrick. Met de nieuwste smartphones kun je dit doen voor foto's gemaakt met de camera aan de achterkant of de voorkant (selfie).

"Mensen noemen het bokeh, maar je krijgt niet de echte onscherpte die je krijgt met een DSLR waarbij je de diepte kunt veranderen; met een telefoon kun je alleen de achtergrond vervagen ”, zegt Gill. "Maar een klein en groeiend aantal fotografen is er echt van onder de indruk en gebruikt een iPhone X voor alledaagse opnames, en alleen als ze een professionele baan hebben, halen ze hun DSLR tevoorschijn."

AI-camera's kunnen automatisch HDR-afbeeldingen mengen bij helder licht, overschakelen naar een modus voor het vastleggen van meerdere afbeeldingen bij weinig licht en de magie van computationele beeldvorming gebruiken om een ​​traploos zoomeffect te creëren met twee of meer cameramodules.

Hoe zit het met DSLR's en andere 'echte' camera's?

Automatische rode-ogenverwijdering zit al jaren in DSLR-camera's, net als gezichtsherkenning en de laatste tijd zelfs lachdetectie, waarbij automatisch een selfie wordt gemaakt als het onderwerp een grijns trekt. Dat is allemaal AI. Zullen Nikon en Canon ooit meer geavanceerde AI gebruiken voor hun vlaggenschip-spiegelreflexcamera's? Het heeft tenslotte vele jaren geduurd voordat wifi en bluetooth op DSLR's verschenen.

Terwijl we wachten, wil een door Kickstarter gefinancierd ‘slimme camera-assistent’ -accessoire genaamd Arsenal het gat opvullen. "Arsenal is een accessoire waarmee je een camera met verwisselbare lens (bijv. Een DSLR) draadloos kunt bedienen vanaf een mobiel apparaat, waarbij algoritmen voor machine learning worden gebruikt om de perfecte foto te maken", zegt Gill. "Wat het doet, is de huidige scène vergelijken met duizenden eerdere beelden, beeldherkenning gebruiken om een ​​specifiek onderwerp te herkennen en de juiste instellingen toepassen, zoals een korte sluitertijd als het dieren in het wild herkent."

Canon leunde ondertussen zwaar op AI-technologie voor het geavanceerde autofocussysteem in de EOS-1D X Mark III. Of, om precies te zijn, 'deep learning'. De complexiteit van de algoritmen is hetzelfde (het systeem wordt getraind met professionele foto's) maar deep learning is het eindresultaat… kunstmatige intelligentie is het vermogen van een machine om zelfstandig te blijven leren.

Het kan echter moeilijk zijn om echte AI te onderscheiden van geavanceerde automatisering. Compactcamerafabrikanten bieden al jaren verschillende onderwerpgeoriënteerde scènemodi die automatisch door de camera kunnen worden gekozen. Is dat 'intelligentie', of gewoon een iets geavanceerdere implementatie van belichtingsmeting, beweging van het onderwerp en focusafstand? Meetsystemen met meerdere patronen gebruiken doorgaans een complexe meting van de lichtverdeling op basis van duizenden foto's uit de echte wereld en maken gebruik van een 'deep learning'-proces voordat de term werd uitgevonden.

Voor wie is AI-fotografie bedoeld?

Iedereen. Om te beginnen gaat het om het democratiseren van fotografie. "In het verleden was fotografie het domein van mensen met de expertise om een ​​DSLR te gebruiken om verschillende soorten afbeeldingen te maken, en wat AI is begonnen is om de effecten en mogelijkheden van meer geavanceerde fotografie beschikbaar te maken voor meer mensen", zegt Fitzpatrick .

Betekent dit dan dat Adobe's Photoshop en Lightroom binnenkort zullen worden opgeheven? Absoluut niet; AI is een complementaire technologie en maakt fotobewerking al veel meer geautomatiseerd. Een van de partners van FotoNation is Athen Tech, wiens ‘Perfectly Clear’ op AI gebaseerde technologie automatische batchcorrecties uitvoert die het menselijk oog nabootsen. Deze plug-in voor Lightroom is specifiek bedoeld om te verminderen hoe lang fotografen achter computers zitten die handmatig aan het bewerken zijn. "Professionele fotografen verdienen geld wanneer ze foto's maken, niet wanneer ze afbeeldingen verwerken", zegt Fitzpatrick. "AI maakt professioneel ogende creatieve effecten toegankelijker voor smartphonegebruikers en helpt professionele fotografen om hun brood te verdienen."

AI wordt snel een veel gebruikte term in de wereld van fotografie. Op dit moment is het grotendeels van toepassing op smartphonecamera's, maar de ongelooflijke algoritmen en het enorme niveau van geautomatiseerde software die de technologie mogelijk maakt, zullen binnenkort voor de meesten van ons onweerstaanbaar blijken. Het is misschien nog geen tijd om de DSLR eruit te gooien, maar AI lijkt de manier waarop we foto's maken te veranderen.

Niet alleen dat, maar het zou binnenkort ook de leiding kunnen nemen over het bewerken en beheren van onze bestaande fotobibliotheken. Dat proces is al begonnen. Lightroom CC maakt gebruik van het servergebaseerde Sensei-objectherkenningssysteem van Adobe om afbeeldingen op onderwerp te identificeren, zodat u niet langer uren hoeft te besteden aan het handmatig toevoegen van trefwoorden. AI is misschien een oververhitte term en vaak een afkorting voor wat niets meer is dan de nieuwste, beste geavanceerde software, maar AI belooft iets ongelooflijks te doen voor fotografen; hierdoor komt u meer tijd vrij, zodat u meer en betere foto's kunt maken.

Waarom hebben sommige telefoons twee camera's aan één kant? Dubbele camera-ontwerpen uitgelegd

Skylum Software is een van de leiders op het gebied van door AI aangedreven fotobewerkingssoftware. Het heeft AI Sky Replacement in Luminar geïntroduceerd om alle handmatige maskering die nodig is om dit handmatig te doen, te elimineren, AI Augmented Skies om wolken, planeten, bliksem en meer toe te voegen aan je afbeeldingen, AI-tools voor portretverbetering die autonoom menselijke kenmerken kunnen identificeren, en AI-structuur om alleen een definitie toe te voegen aan die delen van een afbeelding waar dit passend is.

Het gebruik van augmented reality in fotografie kan controversieel blijken te zijn. Sinds de uitvinding van beeldeditors is het mogelijk om de werkelijkheid te vervormen, verdraaien en 'uitvinden', maar AI belooft dit zo gemakkelijk en zo overtuigend te maken dat er geen speciale vaardigheid (of geweten) voor nodig is.

• De beste cameratelefoons die u vandaag kunt kopen
• De beste fotobewerkingssoftware op dit moment
• Hoe Photoshop te downloaden
• Hoe Lightroom te downloaden

Interessante artikelen...