2026/08/27

휴대폰 카메라 모션 참조로 AI 영상 카메라 움직임을 제어하는 방법

휴대폰으로 자연스러운 카메라 움직임을 기록하고 깔끔한 모션 참조로 변환한 뒤, 3D 애니메이션을 배우지 않고 AI 영상 모델에 카메라 움직임을 지시합니다.

휴대폰 카메라 모션 참조는 "핸드헬드" 또는 "시네마틱" 같은 단어를 해석하도록 AI 영상 모델에 맡기는 대신, 카메라가 어떻게 움직여야 하는지 직접 보여줍니다. 경로, 속도, 멈춤, 작은 인간미 있는 불완전성을 먼저 기록합니다. 그러면 영상 모델이 그 클립을 모션 가이던스로 사용하며, 프롬프트와 스틸 참조가 최종 피사체와 시각 스타일을 정의합니다.

완성된 세트나 다듬어진 참조 영화가 필요하지 않습니다. 방 하나, 박스 몇 개, 피사체 대역 역할을 할 사람 하나면 충분합니다. 이 튜토리얼은 아이폰에서 가상 장면을 블록 처리하고 싶은 크리에이터를 위한 선택 AR 워크플로우도 다룹니다.

TL;DR

기록하기 전에 시작 프레임, 종료 프레임, 메인 카메라 무브를 정합니다.
스탠드인이나 단순한 물건으로 피사체의 위치와 규모를 보여줍니다.
기기 추적과 시각 특징이 명확하도록 밝고 질감이 풍부한 공간에서 천천히 기록합니다.
참조를 한 개의 깔끔한 무브로 트리밍하고 맨 처음과 끝의 실수로 인한 리프레이밍을 제거합니다.
모델에 영상에서 무엇을 복사하고 무엇을 무시할지 알려줍니다.
경로, 속도, 프레이밍, 시차, 피사체 접촉을 시각 스타일과 분리해 검토합니다.

블록 처리한 장면에서 기록한 참조, AI 생성, 모션 검토까지의 초보자용 휴대폰 카메라 모션 워크플로우

왜 모션 참조가 카메라 형용사보다 나은가

텍스트는 촬영에 이름을 붙이는 데는 유용합니다. 인간이 조작하는 카메라의 완전한 경로를 설명하는 데는 덜 정확합니다. "느린 핸드헬드 푸시인"은 여러 결정을 열린 상태로 둡니다: 걷는 속도, 높이, 옆으로의 드리프트, 감속하는 순간, 흔들림의 양, 렌즈가 멈추는 곳입니다.

참조 클립은 그 결정들을 모션으로 담습니다. ByteDance는 Seedance의 영상 참조를 구성, 카메라 언어, 무브먼트 리듬을 가이드하는 방법으로 설명합니다.^[1] 생성된 쇼트는 프레임 단위로 복사되지는 않지만, 모델은 따를 구체적인 궤적을 가집니다.

입력을 별개의 부서로 생각해봅시다:

입력	주역할
휴대폰 참조 영상	카메라 경로, 속도, 멈춤, 흔들림, 공간 리듬
시작 또는 스타일 이미지	캐릭터, 제품, 의상, 팔레트, 조명
프롬프트	장면 의미, 액션, 제약, 각 참조가 제어하는 것
음성 참조(사용 시)	타이밍, 목소리, 음악, 음향 특성

이 역할들이 깔끔할수록 실패를 진단하기 쉽습니다.

초보자를 위한 2가지 녹화 방법 중 선택

방법 A: 물리적 블록 처리를 촬영한다

가장 빠른 방법입니다. 최종 피사체가 있을 위치에 의자, 박스, 램프, 또는 친구를 놓습니다. 계획한 카메라 무브로 휴대폰을 들고 기록합니다. 물건들이 최종 장면처럼 보일 필요는 없습니다. 위치, 크기, 가림만 보존하면 됩니다.

이 방법을 사용하는 경우:

테이블 위 제품으로의 푸시;
공연자 주변의 핸드헬드 오빗;
벽이나 전경 물체 뒤에서의 리빌;
움직이는 피사체 옆의 로우 트래킹 무브;
전경에서 배경으로의 랙 같은 리프레이밍.

방법 B: AR로 가상 블록 처리를 기록한다

AR 도구는 가상 장면에 스탠드인을 배치하고 물리적 휴대폰 움직임을 기록된 카메라 경로로 변환할 수 있습니다. 예를 들어, 오픈소스 Film Space 프로젝트는 피규어 스탠드인, 렌즈 프리셋, 장면 블록 처리, 카메라 모드, 녹화 기능을 갖춘 SwiftUI 가상 스튜디오를 제공합니다.^[2]

이 방법은 더 많은 준비가 필요합니다. Apple 개발 환경과 기기가 필요하기 때문입니다. 장점은 물리적 촬영지나 피사체가 없을 때도 쇼트를 리허설할 수 있다는 것입니다.

ARKit은 카메라 분석과 모션 센싱을 결합해 기기 움직임을 추정합니다. Apple은 시각적으로 풍부한 장면 세부사항, 예측 가능한 조명, 제어된 움직임을 권장합니다. 어두운 공간, 흰 표면, 블러, 또는 매우 빠른 움직임은 추적 품질을 떨어뜨립니다.^[3]

완전히 처음이라면 물리적 블록 처리부터 시작하세요. 가상 스탠드인이나 반복 가능한 공간 마크가 필요할 때만 AR로 넘어가세요.

1단계: 카메라 무브 카드 작성

쇼트가 명확한 시작과 종료를 가질 때까지 걸어가지 마세요.

{
  "shot": "product reveal",
  "duration": "6 seconds",
  "start_frame": "wide, product hidden behind foreground box",
  "path": "move 1.5 meters right while advancing 0.5 meters",
  "height": "chest height, constant",
  "subject_rule": "product becomes centered at 4 seconds",
  "end_frame": "medium close view, hold for 1 second",
  "shake": "small natural walking drift",
  "avoid": "fast rotation, digital zoom, subject leaving frame"
}

이 카드는 초보자의 흔한 문제를 방지합니다: 편집 가능한 프레임으로 끝나지 않는 흥미로운 무브먼트를 기록하는 것입니다.

2단계: 피사체와 전경을 블록 처리한다

최종 피사체 위치에 스탠드인을 배치합니다. 대략적인 높이와 넓이에 맞춥니다. 최종 장면에 테이블, 문, 또는 전경 리빌이 있다면 같은 깊이에 단순한 물건을 포함하세요.

제거 가능한 테이프로 세 곳의 바닥 위치를 표시합니다:

카메라 시작;
리빌이 일어나는 지점;
카메라 정지.

모델은 깊이를 이해하기 위해 시차 단서가 필요합니다. 흰 벽 앞의 한 사람은 전경, 미드그라운드, 배경 물체를 갖춘 사람보다 적은 공간 정보를 보여줍니다.

3단계: 깔끔한 테이크를 녹화한다

휴대폰을 가로로 설정해 16:9 출력으로 하거나, 세로로 설정해 9:16 출력으로 합니다. 무브 중 렌즈 선택은 고정으로 유지합니다. 디지털 줌을 피하세요. 렌즈 변경과 물리적 움직임이 섞이기 때문입니다.

이 리허설 시퀀스를 사용하세요:

시작에 1초간 가만히 서 있습니다.
급하게 움직이지 말고 천천히 움직임을 시작합니다.
휴대폰을 계획한 높이로 유지합니다.
발이 아니라 피사체 프레이밍을 봅니다.
마지막 마크 전에 감속합니다.
끝 프레임을 1초간 유지합니다.

3개 테이크를 녹화합니다. 가장 좋은 참조는 보통 가장 극적인 것이 아니라 가장 단순한 것입니다. 빠른 휩팬이나 공격적인 흔들림이 필수라면 제어된 버전이 성공한 후에만 테스트하세요.

4단계: 참조 클립을 준비한다

의도한 홀드, 무브, 엔드 홀드를 포함하도록 클립을 트리밍합니다. 레코드 버튼을 누르는 순간을 제거합니다. 모델이 사용하고 싶은 타이밍 정보가 있지 않으면 음성을 음소거하세요.

그 후 확인하세요:

피사체가 전체적으로 보이거나 명확히 표현되어 있나요?
카메라가 계획된 구도에 멈추었나요?
의도한 스타일에 지평선이 충분히 안정적인가요?
프레임에 우발적인 사람, 화면, 또는 개인정보가 있나요?
파일이 API 요청을 위해 공개 HTTPS URL로 사용 가능한가요?

사용할 권리가 없으면 개인 또는 식별 가능한 자료를 업로드하지 마세요. 물건이 있는 블록 처리는 대개 무관한 사람을 촬영하는 것보다 안전합니다.

5단계: 참조 역할 프롬프트를 작성한다

프롬프트는 모델이 각 입력에서 무엇을 빌릴 수 있는지 나타내야 합니다.

Video 1 is camera-motion guidance only. Follow its camera path, speed,
foreground reveal, and one-second ending hold. Ignore its room appearance,
objects, colors, and lighting.

Image 1 defines the product shape, label layout, and color. Preserve the product
throughout. The final scene is a warm studio table with a dark blue background.

The camera begins wide behind a soft foreground shape, moves right and slightly
forward, reveals the product at 4 seconds, then holds on a centered medium close
view. No added text, logos, hands, or extra products. No digital zoom.

"카메라 모션 가이던스만" 이라는 구절이 중요합니다. 그 없이 모델은 블록 처리의 조명, 방, 또는 스탠드인 외모를 빌릴 수 있습니다.

6단계: 참조를 영상 모델에 보낸다

reAPI의 Seedance 2.5는 공개 영상 참조를 수락합니다. 첫 테스트는 짧게 유지하고 모션이 승인될 때까지 720p를 사용하세요.

curl https://reapi.ai/api/v1/videos/generations \
  -H "Authorization: Bearer YOUR_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "model": "doubao-seedance-2.5-face",
    "prompt": "Video 1 is camera-motion guidance only. Follow its path, speed, foreground reveal, and ending hold. Ignore its room and objects. Image 1 defines the product. Warm studio table, dark blue background. Preserve product geometry. No added text or logos.",
    "video_urls": ["https://example.com/phone-camera-reference.mp4"],
    "image_urls": ["https://example.com/product-reference.png"],
    "resolution": "720p",
    "size": "16:9",
    "duration": 6,
    "generate_audio": false
  }'

현재 reAPI 라우트는 여러 이미지 및 영상 참조를 허용하며, 파일, 기간, 총 입력 제한은 Seedance 2.5 API 페이지에 문서화되어 있습니다. 업로드 검증을 구축하기 전에 그 페이지를 확인하세요. 제한과 가격은 시간에 민감하기 때문입니다.

7단계: 외모 전에 모션을 검토한다

생성된 클립을 참조와 나란히 비교합니다. 첫 번째 패스에서는 색상과 미세한 텍스처를 무시하세요.

확인사항	질문
경로	카메라가 같은 일반적인 방향과 깊이로 이동했나요?
속도	의도한 순간에 가속, 크루즈, 정지했나요?
프레이밍	피사체가 계획된 프레임 영역에 있었나요?
시차	전경과 배경이 자연스럽게 분리되었나요?
지평선	기울임이 우발적이 아니라 의도적인가요?
종료 프레임	컷이나 타이틀을 수용할 수 있는 깔끔한 홀드가 있나요?

모션이 틀렸다면 참조를 단순화하거나 복사된 속성을 더 명시적으로 표현하세요. 모션은 맞지만 제품이 표류한다면 모션 참조를 유지하고 제품 앵커를 강화하세요. 완전히 다른 무브를 기록해서 두 문제를 다 해결하려 하지 마세요.

ByteDance Seed. Seedance 2.0 Official Launch. February 12, 2026. seed.bytedance.com
Max Prokopp. Film Space: SwiftUI virtual film studio with AR camera and scene recording. Retrieved August 27, 2026. GitHub
Apple Developer Documentation. Understanding World Tracking. Retrieved August 27, 2026. developer.apple.com
reAPI. Seedance 2.5 API — Parameters, Modes & Billing. Retrieved August 27, 2026. reapi.ai