Curious RefugeMORNING DIGEST · 2026-09-06 · Curious Refuge🎬 영상
AI 비디오 생성이 재촬영 없이 카메라 앵글과 배경을 통째로 바꾼다
Curious Refuge가 SeaDance 2.5·Minimax H3로 실사 촬영본의 앵글 전환과 배경 교체를 시연하며 영화 제작 순서 자체가 뒤집힌다고 진단했다.

01핵심 개요
- SeaDance 2.5, Minimax H3 두 AI 영상 모델로 실촬영 클립을 "다른 카메라 위치의 일반 샷"으로 재생성
- Magnific 애그리게이터에서 1080p·10초·16:9 설정, 원본 오디오는 생성 간섭 방지 위해 끔
- SeaDance 2.5 비용은 1080p 기준 초당 약 1달러로 예산 반영이 필수
- 실촬영 배우(Joel)를 회색 배경(그레이 박싱)에서 찍은 뒤 포스트 아포칼립스 배경으로 완전 교체 성공
- 캐릭터 시트 기반으로 배우 연기를 다른 인물에게 모션캡처처럼 이식하는 테스트까지 확장
02핵심 주장 / 논점 구조
- 기존 영화 제작은 "촬영 현장에서 확보한 푸티지만 편집에 쓸 수 있다"는 제약이 절대적이었음
- 앵글이 부족하거나 소재가 손상되면 유일한 대안은 고비용 재촬영뿐이었다는 것이 출발 전제
- AI 영상 생성으로 원본과 "구분이 거의 불가능한" 대체 앵글을 사후에 만들어낼 수 있다는 것이 이 영상의 핵심 주장
- 다만 완전 자동 생성만으로는 "인간적 연결감"이 부족할 수 있어, 실배우 연기 + AI 배경/앵글 재생성을 결합한 하이브리드 워크플로우가 최적이라는 절충안을 제시
- 두 모델(SeaDance 2.5 vs Minimax H3) 비교를 통해 "어느 모델이 실무 투입 가능한 수준인가"라는 실용적 논점을 검증
03새로운 프리·포스트 프로덕션 순서
- 기존 순서: 기획 → 로케이션 헌팅 → 전체 앵글 촬영 → 편집(부족한 앵글은 재촬영 또는 포기)
- 제안하는 순서: 기획 → 배우 연기만 확보(그레이 박싱 또는 로케이션 일부) → 편집 단계에서 AI로 앵글·배경·캐릭터를 사후 생성
- 그레이 박싱 촬영 시 회색 배경에 트래킹 포인트를 배치해 카메라가 패럴랙스(원근 시차)를 인식하도록 하는 것이 핵심 기술 조건 — 흰색·그린스크린보다 추적이 쉬움
- 로케이션 실촬영 대비 그레이 박싱은 조명·환경 통제력은 높지만 "현장의 실제 시각적 피드백"은 없다는 트레이드오프가 존재하며, 장르에 따라 선택이 갈린다고 설명
04전략적 의미
- 재촬영(reshoot) 비용이라는 영화 제작의 전통적 리스크 요인이 AI 생성 비용(초당 약 1달러 수준)으로 대체될 가능성이 생김
- 로케이션 확보나 스케줄 조율이 어려운 저예산·독립 프로덕션에게 사실상 "가상 재촬영" 옵션이 열림
- VFX, 실사 촬영(live-action cinematography), 버추얼 프로덕션 산업 구조에 직접적 영향을 미칠 것으로 전망됨
- 광고 영역처럼 100% 일치가 필수가 아닌 프로젝트에서는 이미 실무 투입 가능한 완성도라는 평가
05모델별 비교: SeaDance 2.5 vs Minimax H3
| 테스트 항목 | SeaDance 2.5 | Minimax H3 |
|---|
| 스케이트보드 여성 (앵글 전환) | 전반적으로 우수, 머리카락·보드 움직임에 약간의 부자연스러움 | 얼굴 디테일 손실, 카메라 트래킹과 시선 불일치 |
| 도쿄 워킹 스낵 클립 | 첫 시도에서 "일반 샷"이 아닌 결과, 반복 시도로 개선 여지 | 즉시 원하는 일반 샷 확보, 다만 피부 질감이 플라스틱처럼 합성적 |
| 커플 미세 표정 연기 | 동작 일치율 약 90~95%, 촬영 오차 수준으로 양호 | 셔츠 문구 등 디테일 손실, 피부 질감 저하 |
| 옥수수 트럭·엘프 복장 | 색보정·렌즈 다이내믹까지 완성도 높음 | 결과물이 전반적으로 소프트(디테일 부족) |
| 그레이 박싱 배경 교체 | 로케이션 레퍼런스 추가 시 결과 개선, 실무 투입 가능 수준 | 얼굴 블러 심함, 배경 인물 품질 저하로 사용 불가 판정 |
| 캐릭터 교체(모션캡처화) | 초점 이동·블러 등 디테일까지 재현 | 완전히 다른 각도로 이탈하거나 아티팩트 과다 |
06활용 시나리오
- 예산 제약으로 재촬영이 불가능할 때, 기존 촬영본에서 다른 카메라 각도의 샷을 사후 생성해 편집에 끼워 넣기
- 그레이 박싱 스튜디오에서 배우 연기만 확보한 뒤, 포스트 프로덕션에서 SF·판타지 등 고비용 세트를 가상으로 합성
- 캐릭터 시트를 활용해 실제 배우의 연기(표정·타이밍)를 애니메이션 캐릭터나 다른 배우 외형에 이식하는 모션캡처 대체 워크플로우
- 깊이 맵(depth map)을 참조 입력으로 사용해 원본 연기와의 일치도를 높이는 고급 활용(단, 얼굴이 레퍼런스 인물과 닮아가는 부작용 주의)
- 콘서트홀 무대 연출처럼 현실적으로 촬영이 어려운 장면을 캐릭터 시트+로케이션 레퍼런스 조합으로 재구성
07현황 및 전망
- 현재 시점에서 SeaDance 2.5가 사실적 결과물·연속성 측면에서 Minimax H3보다 우위라는 것이 영상 전반의 일관된 평가
- 완벽한 일치(100%)는 아직 불가능하며, 손목시계 위치나 프레임 간 미세한 디테일 변화 등 "연속성 편집(continuity check)"이 여전히 필요
- 제작자는 "이런 발전이 앞으로 몇 달 안에 어떻게 전개될지 지켜봐야 한다"고 언급하며 아직 초기 단계임을 인정
- Curious Refuge는 이러한 그레이 박싱 대 로케이션 촬영 논쟁을 향후 영상에서 추가 테스트로 다룰 예정이라고 예고
08용어 사전
- SeaDance 2.0/2.5: 영상 생성 AI 모델로, 이 영상에서 카메라 앵글 전환과 배경 교체에 사용된 핵심 도구
- Minimax H3: SeaDance와 비교 대상이 된 또 다른 AI 영상 생성 모델
- Magnific: 여러 AI 영상 생성 모델을 한 곳에서 사용할 수 있게 해주는 온라인 애그리게이터 플랫폼
- 그레이 박싱(Gray boxing): 회색 배경과 트래킹 포인트만 갖춘 세트에서 배우를 촬영한 뒤 AI로 배경을 합성하는 촬영 기법
- 일반 샷/와이드 샷(General/Wide shot): 인물이나 대상을 더 넓은 화각에서 잡은 촬영 앵글, 이 영상에서 AI로 재생성하는 목표 결과물
- 깊이 맵(Depth map): 장면의 공간적 거리 정보를 흑백 명암으로 표현한 참조 이미지로, AI 생성 시 원본 동작과의 일치도를 높이는 데 사용