2023-11-11 14:47:41
El Lens Fest anual de Snap suele ser un anticipo de las próximas funciones y herramientas. Este año, muchos anuncios incluyen herramientas basadas en IA.
En el evento de este año, la compañía anunció un programa beta para Lens Studio 5.0, que incluye nuevas herramientas de desarrollo de lentes de IA generativa y una API que permite a los creadores integrar ChatGPT, «desbloqueando nuevos tipos de experiencias de aprendizaje, conversacionales y creativas para Snapchatters.»
Lens Studio 5.0
Lens Studio es el conjunto de herramientas que utilizan los desarrolladores para crear lentes y filtros, es decir, los efectos de realidad aumentada que utilizan todos los Snapchatters. Lens Studio es también la columna vertebral de Kit de cámara que los socios de Snap utilizan para desarrollar sus propios proyectos de RA que funcionan en otras experiencias basadas en web o aplicaciones.
La próxima quinta generación de la plataforma utiliza la IA de dos formas principales: para ayudar a crear contenidos y para crear nuevos tipos de experiencias.
Lentes de IA generativa
La IA generativa toma una pregunta y devuelve un producto. A través de una asociación con DALL-E y el creador de ChatGPT OpenAILens Studio 5.0 combina Gen AI con las herramientas de malla facial de Snap. Juntas, estas herramientas reconocen un rostro, lo mapean en tres dimensiones y crean efectos que reaccionan con la cara del usuario en tiempo real.
Las lentes expresivas creadas a partir de mallas faciales son algunas de las más populares de Snapchat. Hacerlas más rápidas y fáciles de construir es una poderosa herramienta para los desarrolladores, pero también apunta hacia experiencias más emocionantes para los usuarios de la plataforma.
Snap también se ha asociado con el generador 3D AI Meshyque permite a los usuarios generar materiales y texturas con instrucciones de texto. La herramienta alivia lo que Trevor Stephenson, director senior de ingeniería de software de Snap, denominó «los aspectos que más tiempo consumen y que suponen un mayor reto a la hora de crear experiencias de RA de alta fidelidad.»
Por último, Stephenson se burló de las herramientas que permitirían a los usuarios cambiar las características de la cámara basándose en sencillas instrucciones, «como un director». En un vídeo adjunto, una mujer busca «mood vibes» y la aplicación activa una lente difusa en blanco y negro.
Las primeras lentes creadas con GenAI estuvieron disponibles a principios de este año, pero el conjunto de herramientas para crearlas no estaba disponible previamente para la comunidad general de desarrolladores.
Lentes conversacionales
Es probable que la mayoría de los lectores hayan interactuado con un Modelo de Lenguaje Amplio que responde a una petición no con un producto, sino con sus propias ideas. Lens Studio 5.0 incluye una «API remota» que permite a los desarrolladores integrar ChatGPT en sus lentes.
Aunque muchos lectores ya estarán relativamente familiarizados con esta tecnología, las aplicaciones innovadoras de medios sociales como Snapchat son la primera forma en que muchas personas experimentan tecnologías emergentes como la inteligencia artificial, lo que supone un importante punto de entrada para los menos inclinados a la tecnología.
La IA en Snap
Snap no sólo utiliza la IA para crear contenidos. La directora de educación, aprendizaje y formación, Stacey Long Genovese, también mostró una integración con Mendable, que Snap utilizó para crear «una herramienta generativa impulsada por IA que ingiere todo nuestro contenido de aprendizaje para crear una experiencia de navegación inteligente.»
Snap AI también sugiere lentes en función del entorno o los recuerdos del usuario. En la Cumbre de Socios de Snap celebrada en primavera, la empresa anunció Mi IA – un compañero de IA personalizable. Sin embargo, esta función solo es compatible con dispositivos iOS y ha recibido pocas actualizaciones interesantes desde su lanzamiento.
Snap tiene una historia de usar lo aparentemente viejo para abrazar lo nuevo. La autoproclamada «empresa de cámaras» introdujo a innumerables personas en el mundo de la realidad aumentada.
Ahora que muchos usuarios y desarrolladores están tentados de dar por sentada la magia de la RA, Snap está dando la bienvenida poco a poco a la gente al futuro de la inteligencia artificial como herramienta de producción y compañero social. Además, la RA va de la mano de la IA de todos modos, con su fuerte necesidad de visión por ordenador avanzada.
