La persona sigue sentada en el sillón, moviéndose igual que antes. Lo único que cambia es lo que hay detrás: la pared vacía desaparece y en su lugar aparece una terraza al atardecer. La cámara no cambia de movimiento y la persona no fue repintada. Eso es cambiar fondo de video IA bien hecho, y es lo que muestra el video de arriba.
La mayoría de las búsquedas sobre cambiar fondo de video IA caen en una app pensada para fotos, que falla apenas la persona gira la cabeza, o en la idea de que hace falta pantalla verde sí o sí. Ninguna de las dos cosas es cierta hoy, pero lograr un resultado estable sí necesita algo más que un clic.
Por qué una app de fotos no alcanza para video
Una app de cambiar fondo pensada para fotos solo tiene que cortar un borde convincente, una sola vez. En video ese borde tiene que mantenerse correcto mientras la persona se mueve, y ahí es donde las apps rápidas fallan:
- La máscara tiene que rastrear, no solo cortar. Un corte de un solo fotograma no sigue un giro de cabeza ni un brazo que se levanta.
- El fondo nuevo tiene que quedarse fijo respecto a la cámara. Si la cámara hace un paneo y el fondo no se mueve con ella, el resultado se ve como una calcomanía en vez de un lugar real.
- Los bordes donde la máscara se rompe (el pelo, un movimiento rápido, una mano que pasa por delante) son justo donde un corte de un solo fotograma muestra sus costuras.
La pantalla verde resuelve el problema de separar a la persona controlando el color durante la grabación. Una máscara rastreada resuelve lo mismo sin pantalla verde, por eso funciona con un video que ya tienes grabado.
El flujo que funciona
1. Marcar a la persona, no el fondo
Dibuja la máscara alrededor de la persona u objeto que se queda, en el fotograma donde se ve más clara. Es más fácil rastrear un contorno limpio que perseguir un fondo que cambia detrás.
2. Rastrear todo el plano
Deja que la máscara siga a la persona mientras se mueve, y después revisa el resultado a tamaño completo. Los fotogramas para revisar son los giros de cabeza, una mano que pasa por delante del cuerpo, y cualquier momento donde la persona sale parcialmente de cuadro.
3. Generar el fondo nuevo según el movimiento de cámara
El fondo nuevo tiene que moverse como se habría movido el original: si la cámara se acerca o hace un paneo, el fondo nuevo necesita el mismo movimiento, no una imagen fija puesta detrás de la persona.
4. Igualar la luz
Una terraza al atardecer detrás de alguien iluminado con luz de interior de día se nota enseguida. Hay que revisar que la dirección y el color de la luz sobre la persona tengan sentido contra el fondo nuevo antes de dar por terminado el plano.
5. Revisar el borde al 100%
Los halos y bordes borrosos alrededor del pelo o un movimiento rápido solo se ven a tamaño completo, no en una vista chica. Si fallan unos pocos fotogramas, corrige la máscara solo ahí y vuelve a correr ese tramo.
Pedírselo a un agente
En Shoty puedes seguir estos pasos a mano, o pedírselo al agente desde el chat.
Cambia el fondo detrás de la persona en el sillón por una terraza al atardecer. Rastréala en todo el plano, que siga el paneo de la cámara, y mantén a la persona y su movimiento exactamente igual. Muéstrame el resultado antes de reemplazar el original.
Con el modo de ejecución en revisión, el agente marca a la persona, la rastrea, genera el fondo nuevo y espera tu aprobación antes de reemplazar el clip original.
Lo que todavía hay que revisar a mano
- El pelo y los movimientos rápidos en el borde de la máscara conviene revisarlos aunque el rastreo haya llegado lejos.
- Que la luz coincida es una decisión de criterio. La herramienta puede acercarse; si alcanza para publicarlo lo decides tú.
- Cambios grandes de fondo (otra hora del día totalmente distinta, gente de más detrás) significan que se inventa más del cuadro, así que conviene revisarlos con más cuidado que un cambio simple de pared.
Descarga el editor gratuito Shoty y prueba un cambio de fondo con tu propio video. Si primero necesitas separar a la persona fotograma por fotograma, mira AI rotoscoping. La guía completa en inglés está en AI background replacement video.