Snapchat geeft preview van AI-tools voor realtime AR-ervaringen

Nu rivalen als Meta grote investeringen doen in AI, heeft Snapchat, het populaire social media platform van Snap, ook zijn eigen door kunstmatige intelligentie aangestuurde functies aangekondigd. Het bedrijf, dat bekend staat om zijn rol in het pionieren en promoten van Augmented Reality (AR) technologieën, zal speciale effecten via zijn Lens Studio 5.0 naar gebruikers brengen.

AR legt computergestuurde effecten over echte video’s en foto’s en Snapchat’s nieuwe functie belooft een meeslependere en boeiendere gebruikerservaring te bieden via het realtime-afbeeldingsmodel. Het stelt gebruikers in staat om prompts in te typen en realistische AR-ervaringen in realtime te produceren door effecten toe te passen op hun video’s en afbeeldingen.

Nieuwe generatieve AI-functies in Snapchat. Bron: Snap

Wat zijn de realtime AR-ervaringen van Snapchat?

Snapchat’s geplande AR-ervaringen maken gebruik van de kracht van generatieve AI, die speciale effecten creëert die lenzen worden genoemd en die beschikbaar zullen zijn voor AR-ontwikkelaars. Ontwikkelaars kunnen deze lenzen vervolgens gebruiken om unieke ervaringen te creëren, die Snapchat-gebruikers kunnen integreren in hun content. Gebruikers kunnen bijvoorbeeld hun omgeving en kleding veranderen in de video’s die ze maken met behulp van dergelijke ervaringen.

Wanneer u een effect toepast op uw foto of video, past het zich automatisch aan de kleuren en de belichting in uw content aan, wat resulteert in een naadloze ervaring. U kunt aangepaste lenzen genereren met behulp van verschillende tekstprompts.

Achtergronden en kleding veranderen met AI. Bron: Snapchat

Lens Studio krijgt een upgrade

Snapchat’s ontwikkelaarsprogramma Lens Studio krijgt ook een upgrade in lijn met de nieuwe AI-functies. Het platform stelt ontwikkelaars en artiesten in staat om AR-functies te creëren voor applicaties en websites, waaronder Snapchat. Met de nieuwe update heeft Lens Studio nu verschillende generatieve AI-tools, waaronder een AI-assistent die kan helpen bij het beantwoorden van vragen van gebruikers.

Bovendien kunnen ontwikkelaars nu direct 3D-afbeeldingen genereren met behulp van tekstprompts, dus het is niet nodig om ze handmatig te modelleren. Dit kan de tijd en moeite die nodig is om AR-effecten te creëren aanzienlijk verminderen, terwijl artiesten ingewikkeldere effecten kunnen creëren. De nieuwe 3D-afbeeldingen kunnen de gezichtsuitdrukkingen van gebruikers imiteren en makers kunnen zelfs gezichtsmaskers en texturen maken.

Met de eerdere versie van Lens Studio kon je eenvoudige effecten creëren, zoals het opzetten van een hoed op iemands hoofd. Met de nieuwe versie kan de hoed zich echter aanpassen aan de belichting in de video of afbeelding en zelfs met het hoofd van de persoon meebewegen.

Daarnaast bevat de nieuwe versie immersive ML en gezichtseffecten, waarmee makers het gezicht van de gebruiker kunnen veranderen op basis van een geüploade afbeelding of geschreven prompt. Immersive ML kan de omgeving, het gezicht en het lichaam van gebruikers in realtime transformeren.

Aangepaste AI-modellen maken met de nieuwe Lens Studio. Bron: Snapchat

Met zijn nieuwe generatieve AI-aangedreven functies wil Snapchat het opnemen tegen zijn rivalen en meer gebruikers aantrekken via unieke effecten. Het richt zich ook op ontwikkelaars door het proces van het ontwerpen van AR-functies eenvoudiger en sneller te maken. Het bedrijf heeft ook plannen om in de toekomst meer AI-functies naar het platform te brengen, zoals het ontwerpen van hele outfits in AR.

Wat de beschikbaarheid van de reeds aangekondigde functies betreft, zullen de nieuwe, gebruikersgerichte functies de komende maanden beschikbaar zijn voor reguliere gebruikers, terwijl de functies die speciaal voor makers zijn ontworpen tegen het einde van het jaar worden uitgebracht.