요약
Seedance 2.0의 참조 동영상 기능을 활용하면 텍스트로만 설명하던 카메라 움직임, 캐릭터 안무, 타이밍과 같은 동작을 기존 클립을 통해 정확하게 고정할 수 있습니다. 3-8초 길이의 참조 클립을 사용하고(단일 샷, 점프 컷 없음, 깨끗한 H.264 압축) 텍스트 프롬프트는 간결하게(스타일 설명에 형용사 3개 이하) 작성하세요. 텍스트는 참조 클립이 보여줄 수 없는 부분만 설명하고, 동작은 참조 클립을 통해 전달합니다. 결과물이 참조에서 크게 벗어나거나 무시하는 경우, 아래 문제 해결 단계를 참고하세요.
소개
텍스트 프롬프트 기반 동영상 생성은 모호한 컨셉, 분위기, 다양한 시각적 접근에 적합합니다. 하지만 "특정 제스처의 정확한 타이밍", "카메라 푸시인", "걷기 패턴"처럼 이미 동작이 정해진 작업은 텍스트로 정밀하게 구현하기 어렵습니다.
이때 참조 동영상을 활용하면 원하는 동작을 명확하게 전달할 수 있습니다. Seedance 2.0은 사용자가 제공한 참조 클립의 동작을 새로운 장면에 맞춰 재해석합니다.
이 가이드는 참조 동영상이 필요한 상황, 텍스트만 사용할 상황, 효과적인 참조 클립 준비법, 가장 흔한 문제 해결법을 상세히 다룹니다.
참조 동영상 사용 시기
참조 동영상이 특히 효과적인 경우:
- 미세 제스처: "엄지손가락 탭", "3박자에 정확히 맞는 고개 끄덕임" 등 정밀 타이밍이 중요한 동작
- 안무: 반복적인 동작 패턴(특정 보폭 걷기, 신체 루틴 등)
- 카메라 움직임: 느린 푸시인, 제어된 궤도, 특정 구도 변경 등 텍스트로 설명이 어려운 카메라 워크
- 비트 맞추기: 오디오 신호에 동작을 정확하게 동기화할 때(텍스트보다 참조 클립이 타이밍 전달에 유리)
텍스트만 사용하는 게 나은 경우:
- 다양한 해석이 가능한 모호한 컨셉
- 한 콘텐츠에서 여러 시각적 방향성을 탐색할 때
- 적합한 참조 클립이 없고, 동작이 단순할 때
참조 클립 준비
좋은 참조 클립은 아래 조건을 갖춰야 합니다:
- 길이: 3-8초(너무 짧으면 정보 부족, 너무 길면 결과 불안정)
- 연속성: 컷, 점프컷 등 없는 단일 연속 샷
- 압축: 매크로블로킹 없는 깨끗한 H.264 압축(압축 노이즈, 재인코딩은 결과 악화)
- 피사체 선명도: 단순 배경, 안정적 조명, 피사체가 잘 드러나야 함(복잡한 배경은 피사체 식별에 방해)
-
체크리스트:
- [ ] 8초 미만
- [ ] 단일 연속 샷, 컷 없음
- [ ] 깨끗한 압축, 블로킹 없음
- [ ] 배경 대비 피사체 명확
- [ ] 전체적으로 안정된 조명
참조 클립을 사용한 프롬프트 작성
참조 클립과 텍스트 프롬프트를 함께 쓸 때, 텍스트는 참조의 보완 역할만 하도록 작성하세요.
텍스트 작성 요령
-
텍스트는 참조가 보여주지 않는 것에만 집중
- 스타일(조명, 색상, 톤)
- 피사체 정보(새로운 장면의 등장인물 또는 사물)
- 카메라 컨텍스트(참조에서 명확하지 않은 경우)
- 한두 개의 구체적인 제약 조건
프롬프트 구조 예시
Style: [조명/팔레트 등 2-3개 형용사]
Subject: [피사체의 특징]
Camera: [필요하다면 참조와 다름을 명시]
Reference intent: "Respect motion from reference: reinterpret texture and color."
Must not: [필요하다면 한 가지 구체적 제약]
예시
참조 클립: 일정 속도로 걷는 사람
텍스트 프롬프트:
Style: warm afternoon light, golden tones
Subject: a man in a gray suit, early 40s, confident posture
Respect motion from reference: reinterpret texture and color.
Must not: change walking pace
팁: 스타일 설명자는 최대 3개로 제한하세요. 너무 많으면 모델이 혼란스러워집니다.
WaveSpeedAI를 통한 API 사용
Seedance 2.0은 WaveSpeedAI API로 동작합니다. 참조 동영상 사용 예시:
POST https://api.wavespeed.ai/api/v2/seedance/v2/image-to-video
Authorization: Bearer {{WAVESPEED_API_KEY}}
Content-Type: application/json
{
"prompt": "Warm afternoon light, golden tones. A man in a gray suit walks forward. Respect motion from reference.",
"image_url": "https://example.com/subject-reference.jpg",
"reference_video_url": "https://example.com/motion-reference.mp4",
"duration": 5,
"aspect_ratio": "16:9"
}
Apidog으로 테스트
통합 개발 전, Apidog에서 테스트 컬렉션을 구성하세요.
Apidog 공식 사이트
환경 설정
WAVESPEED_API_KEY를 비밀 변수로 등록하고, Apidog 환경을 생성합니다.
요청 흐름
- 요청 1: 생성 시작
- 요청 2: 결과 폴링
요청 1
POST https://api.wavespeed.ai/api/v2/seedance/v2/image-to-video
Authorization: Bearer {{WAVESPEED_API_KEY}}
Content-Type: application/json
{
"prompt": "{{motion_prompt}}",
"image_url": "{{subject_image}}",
"reference_video_url": "{{reference_clip}}",
"duration": {{duration}},
"aspect_ratio": "16:9"
}
Tests 탭에서 작업 ID 추출:
pm.environment.set("job_id", pm.response.json().id);
요청 2
GET https://api.wavespeed.ai/api/v2/predictions/{{job_id}}
Authorization: Bearer {{WAVESPEED_API_KEY}}
단언
Response body의 status 필드가 "completed"인지 확인합니다.
문제 해결 가이드
동작 떨림
- 클립 양쪽 끝의 원치 않는 미세 동작을 잘라내세요.
- 원본 영상의 시각적 노이즈 최소화.
- 후처리 안정화 대신, 촬영 단계에서 안정화 적용.
- 참조 클립 길이를 3-5초로 축소.
- 텍스트 프롬프트에서 충돌 가능성이 있는 설명자를 제거해 단순화.
참조 무시됨(모델이 참조 클립 반영 안 함)
- 동작을 약간 과장하고, 피사체를 프레임 중앙에 배치.
- 한 클립에 한 가지 동작(카메라 혹은 캐릭터)만 포함.
- 텍스트에 "참조에서 카메라 움직임 복사" 등 명시적 지시 추가.
- 참조 클립에서 가장 깨끗한 2~3초 구간만 추출.
- 카메라 움직임 참조 시, 시차 인식을 위해 표면에 테이프 등 참조 표시 활용.
스타일 불일치(결과물이 의도한 미학과 다름)
- 스타일 설명자 2~3개로 제한.
- 비디오 참조와 함께 정적 프레임(이미지 참조) 추가.
- 참조 클립의 패턴·세부사항 단순화.
- 렌더링 설정의 일관성 유지.
- 우선 동작을 정확하게 맞춘 뒤 외형 반복.
권리 및 동의
식별 가능한 인물이 포함된 참조 동영상 사용 시, 아래 사항을 필수로 점검하세요.
- 모든 인물의 서면 동의
- 미성년자는 보호자 서명 필요
- 촬영 장소의 상업적 사용 허가 여부 확인
- 참조에 로고·제3자 마크 미노출
- 기록 보관(날짜, 동의서, 클립 버전 등)
이 가이드라인은 참조 클립 및 생성 결과에 등장하는 모든 식별 가능한 피사체에 적용됩니다.
자주 묻는 질문
Q. 참조 동영상이 이미지 참조를 대체하나요?
A. 아니요. 이미지 참조는 피사체의 외형을, 비디오 참조는 동작을 고정합니다. 둘 다 사용하면 외형과 동작을 독립적으로 제어할 수 있습니다.
Q. 참조 클립은 얼마나 길어야 하나요?
A. 3~8초. 너무 짧으면 동작 정보 부족, 너무 길면 결과 불안정.
Q. 다른 장르의 참조 클립을 사용할 수 있나요?
A. 네. 예를 들어, 사람이 걷는 동작을 로봇 캐릭터에 적용할 수 있습니다. 동작은 전달되고, 시각적 요소는 텍스트와 이미지 참조로 대체됩니다.
Q. 참조 클립의 해상도 기준은?
A. 720p 이상 권장. 저해상도 클립은 동작 전달력이 떨어집니다.
Q. 동일 참조로 여러 클립 생성 가능?
A. 가능합니다. 동일 참조 클립 + 다양한 프롬프트로 다수의 일관된 동작 변형을 생성할 수 있습니다.
위 가이드라인과 체크리스트를 기반으로 참조 동영상 기반 Seedance 2.0 워크플로우를 바로 구현해보세요.
Top comments (0)