Das jährliche Lens Fest von Snap bietet einen Ausblick auf kommende Funktionen und Tools. In diesem Jahr betrafen viele der Ankündigungen KI-basierte Tools.
Auf der diesjährigen Veranstaltung kündigte das Unternehmen ein Beta-Programm für Lens Studio 5.0 an, das neue generative KI-Tools für die Lens-Entwicklung und eine API enthält, mit der Entwickler ChatGPT integrieren können, um "neue Arten von Lern-, Konversations- und Kreativitätserlebnissen für Snapchatter" zu ermöglichen.
Lens Studio 5.0
Lens Studio ist das Toolkit, das Entwickler verwenden, um Linsen und Filter zu erstellen - die Augmented-Reality-Effekte, die Snapchattern täglich zur Verfügung stehen. Lens Studio ist auch das Rückgrat des Camera Kit, mit dem Snap-Partner ihre eigenen AR-Projekte entwickeln können, die in anderen Web- oder App-basierten Erlebnissen funktionieren.
Die kommende fünfte Generation der Plattform nutzt KI vorwiegend auf zwei Arten: zur Unterstützung bei der Erstellung von Inhalten und zur Schaffung neuer Arten von Erlebnissen.
Generative KI-Linsen
Durch eine Partnerschaft mit OpenAI, dem Entwickler von DALL-E und ChatGPT, verbindet Lens Studio 5.0 generative KI mit den Gesichtserkennungswerkzeugen von Snap. Gemeinsam erkennen sie ein Gesicht, rendern es dreidimensional und erzeugen Effekte, die in Echtzeit auf das Gesicht des Benutzers reagieren.
Ausdruckslinsen für Gesichter gehören zu den beliebtesten Funktionen von Snapchat. Die schnellere und einfachere Erstellung dieser Linsen ist eine große Hilfe für Entwickler.
Snap hat sich außerdem mit Meshy zusammengetan, einem 3D-KI-Generator, der es den Nutzern ermöglicht, Materialien und Texturen mit Textanweisungen zu erstellen. Das Tool erleichtert das, was Trevor Stephenson, Senior Manager of Software Engineering bei Snap, als "die zeitaufwändigsten und schwierigsten Aspekte bei der Erstellung realistischer AR-Erlebnisse" bezeichnet.
Schließlich kündigte Stephenson Tools an, mit denen die Nutzer die Kamerafunktionen auf der Grundlage einfacher Befehle "wie ein Regisseur" ändern können. In einem begleitenden Video sucht eine Frau nach "Moody Vibes", und die App aktiviert ein unscharfes Schwarz-Weiß-Objektiv.
Die ersten Linsen, die mit GenAI entwickelt wurden, sind seit Anfang des Jahres verfügbar, aber das Toolkit, mit dem sie erstellt werden können, war für die allgemeine Entwickler-Community bisher nicht zugänglich.
Konversationslinsen
Lens Studio 5.0 enthält eine "Remote API", mit der Entwickler ChatGPT in ihre Lenses integrieren können. Social-Media-Anwendungen wie Snapchat sind für viele Menschen der erste Kontakt mit aufkommenden Technologien wie künstlicher Intelligenz und bieten einen wichtigen Einstiegspunkt für weniger technikaffine Menschen.
Snap setzt KI nicht nur zur Erstellung von Inhalten ein. Stacey Long Genovese, Leiterin der Abteilung für Bildung, Lernen und Training, stellte auch eine Integration mit Mendable vor, die Snap nutzte, um "ein generatives KI-gestütztes Tool zu erstellen, das alle unsere Lerninhalte aufnimmt, um ein intelligentes Browsing-Erlebnis zu schaffen."
Snap AI schlägt zudem Linsen vor, die auf der Umgebung oder den Erinnerungen des Nutzers basieren. Auf dem Snap Partners Summit im Frühjahr kündigte das Unternehmen My AI an - einen anpassbaren KI-Begleiter. Diese Funktion wird jedoch weiterhin nur auf iOS-Geräten unterstützt und hat seit ihrer Veröffentlichung nur wenige spannende Updates erhalten.