Apple está desarrollando una herramienta de inteligencia artificial para animar imágenes mediante indicaciones de texto

Investigadores de Apple han presentado Keyframer, un prototipo de herramienta de animación impulsada por IA que permite a los usuarios agregar movimiento a imágenes 2D describiendo cómo moverlas.

en Trabajo de investigación publicado el 8 de febrero.Apple dijo que los modelos de lenguaje grande (LLM) han sido “poco explorados” en la animación a pesar del potencial que han mostrado en otros medios creativos como la escritura y la generación de imágenes. La herramienta Keyframer impulsada por LLM se muestra como un ejemplo de cómo se puede aplicar la tecnología.

Utilizando GPT4 de OpenAI como modelo base, Keyframer puede tomar archivos de gráficos vectoriales escalables (SVG), un formato de ilustración cuyo tamaño se puede cambiar sin interferir con la calidad, y generar código CSS para animar la imagen basándose en un mensaje de texto. Simplemente sube tu foto, escribe algo como «Haz que las estrellas brillen» en el cuadro que aparece y presiona Crear. Los ejemplos del artículo de investigación muestran cómo un dibujo de Saturno puede hacer una transición entre colores de fondo o mostrar estrellas que aparecen y desaparecen del primer plano.

Los usuarios pueden producir múltiples diseños de animación a la vez y ajustar propiedades como códigos de color y duración de la animación en una ventana separada. No se necesita experiencia en programación ya que Keyframer convierte automáticamente estos cambios a CSS, aunque el código en sí también es completamente editable. Este enfoque basado en descripciones es mucho más simple que otras formas de animación generada por IA, que normalmente requieren muchas aplicaciones diferentes y cierta experiencia en programación.

«Una parte de mí está preocupada de que estas herramientas reemplacen la funcionalidad, porque el potencial es muy alto», dijo un diseñador de movimiento profesional que participó en la investigación de Apple. «Pero creo que reconocerlas y usarlas como animación es solo otra herramienta más en nuestra caja de herramientas. «Nuestras habilidades. Es algo realmente emocionante».

Sin embargo, todavía queda un largo camino por recorrer. Keyframer aún no está disponible para el público, y el estudio de usuarios dentro del trabajo de investigación de Apple consistió en solo 13 personas, que solo podían usar dos imágenes SVG predefinidas simples al probar la herramienta.

Apple también tuvo cuidado de mencionar sus limitaciones en el documento, especificando que Keyframer se centra en animaciones basadas en web, como secuencias de carga, visualización de datos y transiciones animadas. Por el contrario, el tipo de animación que se ve en películas y videojuegos es demasiado complejo para producirse utilizando únicamente descripciones, al menos por ahora.

Keyframer es una de varias innovaciones de IA anunciadas por Apple en los últimos meses. En diciembre, la empresa presentó Manchas gaussianas humanas (HUGS), que puede crear avatares humanos listos para animar a partir de vídeos. La semana pasada, Apple también lanzó MGIE, un nuevo modelo de IA que puede editar imágenes usando descripciones de texto.