Siga ZDNET: Agréganos como fuente preferida en Google.

Conclusiones clave de ZDNET

• Una nueva característica de Runway te permite generar videos a partir de garabatos.
• Es impresionante, pero funciona mejor si se toma con cuidado de la mano.
• El acceso requiere pagar (al menos) una cuenta Standard Runway.

Una familia de colonos, admirando una manada de bisontes, echa a correr mientras dos criaturas aladas demoníacas vuelan sobre sus cabezas. La niña atraviesa un poste de la cerca como un fantasma.

Esta escena surrealista de cinco segundos se creó gracias a una nueva función dentro de la plataforma de inteligencia artificial Runway llamada Motion Sketch. Como sugiere el nombre, genera videos a partir de simples garabatos que puedes hacer directamente sobre una imagen fija.

En el caso del siguiente clip, comencé generando una imagen usando Nano Banana Pro de Google, uno de los modelos de conversión de texto a imagen que se ofrecen a través de la plataforma Runway, luego simplemente dibujé algunas formas parecidas a pájaros y dos flechas que apuntaban en la dirección en la que la familia y el bisonte debían huir. Agregué algunas indicaciones de texto como guía adicional y el modelo hizo el resto.

La función aún necesita algo de apoyo, de la misma manera que ChatGPT a menudo requiere múltiples mensajes finamente elaborados para generar el resultado que está buscando. De todos modos, podría marcar un gran paso adelante para los vídeos generados por IA y para los profesionales de las industrias creativas que prefieren pensar más visualmente que verbalmente.

«La función es útil para todo tipo de usuarios», dijo a ZDNET Aditi Poduval, gerente de productos de Runway. «En última instancia, ayudamos a las personas a lograr movimientos precisos sin necesidad de elaborar un mensaje escrito específico».

Esto es lo que aprendí después de incursionar en Motion Sketch.

Mis experimentos

Después de mi experimento inicial con la imagen de la desaliñada familia de colonos, decidí aumentar el boceto, por así decirlo.

Generé la imagen de la familia usando un mensaje de texto. Pero Nano Banana Pro a través de Runway también puede crear una imagen basada únicamente en un garabato, que puedes hacer directamente en la plataforma al estilo Microsoft Paint. Soy escritor, no artista visual, pero hice lo mejor que pude para esbozar lo que esperaba que pareciera vagamente una serpiente colgando de la rama de un árbol.

Luego, recurrí a Motion Sketch. Como mencioné, conocí el modelo a mitad del experimento de la familia de colonos agregando algunas indicaciones de texto además de mis garabatos, pero esta vez quería ver qué tan bien funcionaría sin ninguna guía escrita. Esperaba generar un clip de la serpiente deslizándose hacia la derecha, así que dibujé algunas flechas simples que dirigen el movimiento a lo largo de su cuerpo. Cualquier niño de seis años sería capaz de entender lo que significan esas flechas, pero ¿cómo funcionaría la IA? Configuré la duración en 10 segundos, seleccioné el modelo de video Gen-4.5 de Runway (Veo 3 y Veo 3.1 de Google también están disponibles) y hice clic en Generar.

Esperaba un clip relativamente suave de la serpiente moviéndose a lo largo de la rama y saliendo por la parte inferior derecha de la toma, pero lo que obtuve fue mucho más alucinante. La serpiente dejó parte de su cuerpo a la izquierda del disparo, y otra serpiente emergió de su cuerpo y cayó del árbol. En un momento, pareció que le crecían patas parecidas a las de un caimán, que usaba para arrastrarse a lo largo de la rama. Las flechas originales que había dibujado también aparecieron brevemente al comienzo del clip antes de desintegrarse.

Para ser justos, las serpientes son una maravilla biológica, y modelar con precisión su movimiento no es una tarea fácil para cualquier animador, ya sea humano o máquina. Y el modelo pareció malinterpretar mis múltiples flechas como una instrucción para que la serpiente se moviera en múltiples direcciones simultáneamente, lo que claramente lo confundió. Así que volví y agregué un mensaje de texto simple a mi imagen original con las flechas: «La serpiente se desliza a lo largo de la rama».

Esta vez el producto final se acercó un poco más a lo que tenía en mente (sin duplicaciones repentinas de cuerpos de serpientes ni brotes de patas). El movimiento todavía parecía incómodo, pero nuevamente, el movimiento de la serpiente es una tarea bastante difícil, con mucha física complicada y detallada involucrada.

Un experimento más: quería ver qué tan bien podía funcionar el modelo con fotos reales, así que subí una desde mi computadora portátil: una foto que había tomado algunos meses antes de Prospect Bark en Brooklyn.

Dibujé lo que es efectivamente un ícono universal del fuego: líneas rojas onduladas con incrustaciones de naranja y que irradian hacia arriba. Nuevamente, no pretendo ser un ilustrador talentoso, pero la mayoría de los humanos podrían reconocer lo que buscaba con esto. La modelo de Runway también se dio cuenta y arrojó una enorme hoguera en el centro de la tranquila escena junto al lago capturada en mi foto. Nuevamente, mi boceto apareció brevemente en el clip antes de desaparecer en un movimiento psicodélico de líneas onduladas que se acortan gradualmente. Y tal vez me lo estoy imaginando, pero los árboles junto a la hoguera incluso parecían ennegrecerse bajo su calor.

la comida para llevar

Como cualquier otra herramienta de IA generativa, Motion Sketch tiene sus imperfecciones y fallos (la niña pasando a través de una viga de madera, la serpiente a la que le crece una pata, las líneas onduladas de mis bocetos originales aparecen brevemente en los videoclips finales). Aún así, estoy impresionado.

He aquí un vistazo a un formato completamente nuevo para generar vídeo con IA, uno que podría reducir más que nunca la barrera entre la imaginación y la producción. «ESTO es lo que estaba esperando», publicó un usuario de X debajo del anuncio del martes de Runway. «¿Dibujar tu visión y luego verla renderizada en video? Un punto de inflexión absoluto para los creadores que no pueden dedicarse a la ingeniería durante toda su vida».

En este momento, todavía requiere un poco de prueba y error si tienes una visión específica en mente, pero de todos modos, es una vista previa emocionante de lo que podría deparar el futuro. Y definitivamente vale la pena jugar con él, incluso (y tal vez especialmente) si simplemente lo haces con un espíritu creativo, sin una visión clara en mente de lo que realmente te gustaría producir.

Como acceder

Motion Sketch requiere (como mínimo) una suscripción estándar a Runway, que cuesta 12 dólares por usuario al mes y viene con 625 créditos mensuales.

Para acceder desde su panel de usuario, haga clic en «Aplicación» en el menú de la izquierda, luego seleccione Motion Sketch debajo de la colección «Explore Gen-4.5» o debajo de la ventana de vista previa en la mitad derecha de la pantalla, donde verá un botón con la etiqueta «Pruébelo ahora».

Desde allí, simplemente cargue su imagen y haga clic en «Boceto» -> «Exportar boceto» -> Generar.