개구리 한 마리가 화면 가운데 앉아 있습니다. 2초 뒤 사라지고, 그 자리의 이끼와 물은 카메라를 따라 계속 움직입니다. 블러 얼룩도, 가장자리 뭉개짐도 없습니다. 위 영상의 왼쪽이 원본입니다. 동영상 물체 지우기를 검색하는 분들이 원하는 결과가 보통 이겁니다.
사진 지우기와 영상 지우기는 다른 문제
사진에서 물체를 지우는 건 이제 거의 해결된 문제입니다. 한 장짜리 그럴듯한 채움만 만들면 되니까요. 영상은 조건이 하나 더 붙습니다. 채운 자리가 모든 프레임에서 같은 위치에 있어야 하고, 시간이 지나도 일관되어야 하고, 물체가 가리고 있던 그림자나 반사까지 맞아야 합니다. 이 중 하나라도 어긋나면 한 프레임만 봤을 땐 괜찮아 보여도 재생하는 순간 눈에 바로 걸립니다.
폰 갤러리 지우개, 캡컷과 뭐가 다른가
갤럭시나 아이폰 갤러리의 지우개, 캡컷의 지우기 기능은 사진 한 장이나 영상의 특정 프레임을 기준으로 동작하는 도구입니다. 사진 속 지나가는 사람을 지우는 정도에는 잘 맞습니다. 영상에서 같은 결과를 기대하면 다릅니다. 물체가 움직이는 영상에서는 그 물체를 전체 구간에서 추적하고, 가려졌던 배경을 시간에 걸쳐 다시 만들어야 하는데, 사진 기준 도구는 이 작업을 하지 않습니다.
캡컷처럼 앱마다, 버전마다 지우기 기능의 범위가 다른 경우도 많습니다. 짧고 배경이 단순한 영상이면 폰 안에서 바로 지우는 것으로 충분할 때도 있습니다. 문제는 카메라가 움직이거나 촬영 구간이 길어질 때입니다. 그때부터는 프레임 하나씩 지우는 방식의 한계가 바로 드러납니다.
실제로 통하는 순서
1. 한 프레임이 아니라 구간 전체를 추적한다
마스크는 한 번만 그리고, 트래킹으로 물체를 따라가게 합니다. 그다음 전체를 훑어보면서 물체가 방향을 틀거나, 다른 것에 가려지거나, 화면 밖으로 나가는 구간만 손으로 고칩니다.
2. 그림자와 반사도 같이 지운다
물체는 사라졌는데 바닥의 그림자만 남아 있으면 바로 티가 납니다. 마스크를 그림자와 유리, 물 반사까지 덮도록 키워야 합니다.
3. 지우고 배경을 복원한다
추적된 구간 전체를 기준으로 지우기를 실행합니다. 배경이 구간 전체에서 다시 만들어지기 때문에 카메라를 따라 자연스럽게 움직이고, 한 프레임씩 채운 결과처럼 스티커처럼 떠 있지 않습니다.
4. 100% 크기로 가장자리를 확인한다
결과를 원본 크기로 재생하면서 마스크 가장자리 주변을 봅니다. 헤일로나 뭉개진 경계는 여기서 먼저 보입니다. 몇 프레임만 어긋났다면 그 구간만 마스크를 고쳐서 다시 돌립니다.
에이전트에게 맡기기
Shoty에서는 위 과정을 직접 할 수도 있고, 채팅으로 에이전트에게 시킬 수도 있습니다.
2번 장면에서 개구리를 지워줘. 전체 구간에서 추적하고 그림자도 같이 지워줘. 물과 이끼는 자연스럽게 움직이게 유지하고, 원본을 바꾸기 전에 결과부터 보여줘.
실행 모드를 검토 단계로 설정해 두면 에이전트가 지우기를 실행한 뒤 승인 전에는 원본을 바꾸지 않습니다. 결과가 충분히 깨끗한지는 직접 확인하고 정하면 됩니다.
자주 지우는 것들
- 촬영 장비나 붐 마이크가 화면에 걸린 경우
- 저작권 처리가 안 된 로고나 간판
- 거리 촬영에서 지나가는 행인
- 와이어나 리그 같은 촬영 장비
- 시대극에 어울리지 않는 현대 물체
방식은 같습니다. 달라지는 건 지울 구멍의 크기입니다. 화면에서 지우는 영역이 넓을수록 배경을 더 많이 새로 만들어야 하므로, 그런 장면은 더 꼼꼼히 확인하는 게 좋습니다.
결과를 다른 편집 프로그램으로 옮기기
지우기 작업까지 Shoty에서 끝낸 다음, 색보정이나 믹싱은 평소 쓰던 프로그램에서 마무리할 수 있습니다. EDL, FCPXML, OpenTimelineIO로 내보내면 프리미어 프로, 다빈치 리졸브, 파이널 컷 프로 어디로든 타임라인을 그대로 가져갈 수 있습니다. 지우기 작업 자체를 다시 할 필요는 없고, 그 결과만 들고 넘어가면 됩니다.
Shoty 무료 에디터 다운로드 후 직접 테스트해 보세요. 클로드 같은 에이전트로 편집하는 방법이 궁금하다면 클로드 영상 편집 글도 참고하세요. 더 자세한 영문 가이드는 remove object from video with AI에 있습니다.