Gemini Omni Flash: cambiar el fondo y al actor de una toma real solo describiéndolo

Tomé un video mío, le cambié el escenario completo y al personaje, y no hubo roto, ni tracking, ni green screen: solo describí el cambio. Gemini Omni Flash — el modelo de video de Google, integrado en Higgsfield — mantiene tu footage como base (movimiento, cámara, acción) y transforma todo lo demás encima. Y para las referencias, Nano Banana 2 Lite genera imágenes a un crédito, menos de 50 centavos de peso. Es la combinación rápida y barata del catálogo; aquí va para qué me sirve y para qué no.

El plano de Joaquín con la pizza, con un letrero de neón que no existía en el set.

Los hechos

• Omni Flash es un modelo de razonamiento que genera video a partir de tu video de entrada y un prompt en lenguaje natural: cambia el fondo, cierra el plano, cambia vestuario o estilo. Google lo vende como “reshape reality”.
• Nano Banana 2 Lite es el modelo de imagen más rápido y económico de Google: un crédito por imagen, cuatro versiones por tanda, en segundos.
• Admite start frame y end frame: sirve para transiciones entre tus clips de cámara.
• Es notoriamente más rápido que Seedance — mis pruebas en 720 salieron sin formarse en la cola.
• Los demos oficiales son gráficos para bienes raíces, motion graphics y explainers: entiende bien el texto en pantalla.

Las pruebas

Le pedí a Nano Banana un letrero de neón que dijera “Jose Pizza” sobre fondo negro. Cuatro versiones, escogí una, la llevé a video con el plano de Joaquín comiendo pizza y le dije: agrega el letrero detrás del personaje. Salió. Antes, al mismo plano le puse un sombrero vaquero y lo convertí en muppet — el personaje y el video completo, en un par de minutos. Es el tipo de cambio que hoy te cuesta una tarde en After Effects o una discusión con el director de arte.

El plano original convertido a muppet con una sola instrucción.

Para qué lo uso y para qué no

Omni Flash lo usaría para creación de contenido, cosas rápidas, urgentes y de mucha prueba y error. Para algo más poderoso y formal — un plano que va a un máster — voy a Seedance. Hay un camino intermedio que rinde: empezar en Nano Banana con la imagen y de ahí recorrer a Omni Flash con el video.

Yo pienso que hoy hay tres modelos buenos de video — Seedance, este Omni y lo que viene de la competencia entre ellos — y en imagen, Nano Banana y GPT Image 2. La combinación de imagen, luego video, sobre tu propio video original, es la clave para llegar al resultado específico. No es que la app te haga todo: son herramientas que usas de forma creativa, cambiando de modelo y de función según el plano.

Donde más lo estoy usando es con el plugin dentro de DaVinci Resolve: ahí subo mi video original en 4K a 10 bits y me regresa lo mismo, con mi corrección de color intacta. Para mi trabajo con clientes de publicidad, poder dar opciones y responder rápido me gana clientes.

Cuatro versiones del letrero en segundos: la referencia que después entra al video.

Lectura para LATAM

En el último año me pasó dos veces: queríamos filmar en una terraza con cierta vista, y desde ahí la locación era lo caro. O el día del rodaje no llegó el clima que queríamos y el cliente se frustra. Nosotros iluminamos, traemos el sol a voluntad; el fondo es lo difícil de controlar. Si le pongo un sol artificial a mi personaje y con Omni Flash agrego el sol al fondo, el problema de la locación se acaba. Para el cineasta latinoamericano que produce sin limitantes en la cabeza pero con todas en la producción, esa es la herramienta de extensión de narrativa: concentrarte en dirección y guion.

Mi opinión personal — Daniel Blanco A.M.C.

Lo probé por primera vez con ustedes en el video y me resultó más fácil y rápido que en la página de Google. Es económico, no tarda nada y es realista en el movimiento, que es lo que Google hace bien. No es el modelo que uso para un máster, pero es el que uso para decidir en diez minutos si una idea vale la pena antes de gastar créditos en Seedance. Ahora represento a Higgsfield en Latinoamérica y lo estoy llevando a universidades y escuelas de cine como herramienta de VFX y de extensión de narrativas — y este modelo es el que más rápido convence a quien no lo ha tocado.

Pruébalo con una toma tuya

Sube un plano que ya tengas, pide un cambio de fondo y nada más. Si quieres que pruebe algo específico, déjamelo en los comentarios del video: me gasto yo mis créditos en tus pruebas para que tú no gastes en prueba y error, y cuando encontremos el camino, ya inviertes.

Imágenes: fotogramas del video de Daniel Blanco A.M.C.

Fuente original: Cambié el escenario y al actor de mi toma real, en YouTube · Modifica cualquier video solo describiendo el cambio

Extra para ti: si andas experimentando con IA para video, en mi link de Higgsfield hay descuentos y promos para arrancar — y usarlo apoya este contenido.