Snap ofrece herramientas con IA generativa para realidad aumentada para videochats

Snap, la compañía detrás de la aplicación de redes sociales Snapchat, ha anunciado nuevas herramientas para efectos especiales de realidad aumentada (AR) en pantallas de video. Estas tecnologías utilizan IA generativa, de modo que los fondos o las mascotas impulsados ​​por IA de Snapchat, por ejemplo, rara vez se ven iguales todas las veces. Con funciones técnicas de este tipo, Snap quiere diferenciarse de otras plataformas de redes sociales y alcanzar a la competencia más utilizada, como las metaplataformas.

anuncio

La llamada “GenAI Suite” es parte de Lens Studio, que puede usarse para crear sus propios avatares de cámara web para videoconferencias. Este software ya está disponible en la versión 5.0 y está disponible para usuarios y desarrolladores. Los desarrolladores de realidad aumentada pueden ofrecer esto para crear imágenes impulsadas por IA no sólo para Snapchat sino también para otras aplicaciones o sitios web. Snap está trabajando con Microsoft y el año pasado puso Snap Lenses a disposición de Microsoft Teams, lo que permite utilizar los filtros AR de Snap como efectos de cámara en videoconferencias.

La empresa ahora ha ampliado estas funciones de realidad aumentada para incluir inteligencia artificial generativa. Hasta ahora, GenAI Suite es solo un prototipo, pero Snap está haciendo lo mismo Información privada Las tecnologías GenAI se han mejorado hasta el punto de que los modelos de IA pueden ejecutarse en tiempo real en dispositivos móviles. Esto incluye fondos generados por IA, mascotas virtuales, Snapchat Dreams (selfies de fantasía) y funciones de cámara con modelos de realidad aumentada generados por IA.

Snaps Lens Studio 5.0 con soporte de IA

Lens Studio 5.0 también incluye un asistente de inteligencia artificial que ayuda a los desarrolladores a crear contenido si tienen estas preguntas. La nueva versión del entorno de desarrollo también pretende reducir significativamente el tiempo necesario para desarrollar efectos AR. El desarrollador jefe de Snap, Bobby Murphy, explicó Según ReutersCon Lens Studio 5.0, esto ahora es posible en cuestión de horas en lugar de semanas y permite modelos más complejos. Por ejemplo, ya no es necesario recrear completamente los modelos 3D antes de utilizarlos en realidad aumentada.

Anteriormente, la realidad aumentada solo se usaba en vídeos para efectos simples, como ponerle un sombrero a alguien. Ahora, según Murphy, las posibilidades son cada vez más realistas. El sombrero ahora se moverá con la cabeza y la pantalla se adaptará a los cambios de iluminación, por ejemplo si la luz es tenue. Además, los cabezales se pueden sustituir completamente por modelos que se adapten a los movimientos originales del cabezal.

Snap: la realidad aumentada de cuerpo completo en vídeo sigue siendo un desafío

Snap planea utilizar realidad aumentada para todo el cuerpo en lugar de sólo la cara y la cabeza como es el caso actualmente. Según Murphy, esto es actualmente muy difícil de lograr. Snap ha estado experimentando con esto durante algún tiempo y, a principios de 2023, lanzó “Shopping Suite” como SaaS para instalaciones de realidad aumentada. Sin embargo, este software como servicio está dirigido a clientes empresariales.

Pueden utilizar herramientas desarrolladas por Snap, a través de las cuales los consumidores finales pueden, entre otras cosas, probarse ropa y zapatos de forma virtual. Todas las técnicas presentadas tienen como objetivo ayudar a tomar mejores decisiones de compra. En última instancia, las compras online incorrectas no sólo provocan frustración entre los clientes, sino que también generan numerosas devoluciones, lo que no sólo daña el medio ambiente sino que también genera costes adicionales.

Además de integrar las funciones de la cámara Snap en Microsoft Teams, la compañía agregó recientemente estos efectos especiales. Transferido a Skype. La gama de cámaras de Snap permite la realidad aumentada en los chats de vídeo, incluido este servicio de mensajería instantánea.

(fds)