AI로 동영상 속 인물 바꾸기: 사진, 움직임, 실제 결과

동영상 속 인물을 교체하려면 무엇이 필요합니까?

AI로 동영상의 캐릭터를 교체하려면 기존 영상과 새 캐릭터가 선명하게 보이는 이미지를 제공한 뒤, 전신 또는 얼굴만 교체할지 선택합니다. 이미지는 외모를 설명하고 동영상은 연기와 카메라의 참조가 됩니다. 출력은 생성된 영상이므로 새 얼굴뿐 아니라 움직임과 주변 세부 사항도 확인해야 합니다.

자신의 영상을 사용하려면 Recast 인물·얼굴 교체 도구를 여십시오. 준비된 동작으로 시작하려면 Recast 템플릿을 선택합니다. 두 절차는 다릅니다. 전자는 업로드한 영상을 사용하고, 후자는 저희가 다시 만든 샘플에서 시작합니다.

얼굴 교체, 전신 교체, 동작 전이의 차이

완성 영상에서 무엇을 유지할지에 따라 선택합니다. ‘동영상에서 동영상으로’라는 이름만으로는 도구가 어떤 작업을 하는지 알 수 없습니다.

제공업체는 각 작업을 서로 다른 인터페이스로 제공할 수 있습니다. Alibaba Cloud의 공식 모델 가이드 는 참조 생성, 동영상 편집, 동작 기반 애니메이션, 인물 교체를 구분합니다. Recast는 지원 모델의 참조 생성 또는 편집 기능을 사용합니다. 모든 모델이 대상 외부의 픽셀을 유지하며 국소 교체한다는 뜻은 아닙니다. 저희의 동영상 참조 생성 가이드 에서 참조 기반 생성을 더 자세히 설명합니다.

실제 사례 두 가지: STORM과 BAD

STORM: 사람 주인공을 태비 고양이로, 군중을 대형 고양잇과 동물로 바꿨습니다. Seedance 2.5에 캐릭터 참조 이미지, 원본 프레임으로 만든 장면 참조 이미지, 15초의 참조 영상을 제공했습니다. 생성된 캐릭터는 참조 이미지의 셔츠와 넥타이를 착용하며, 흡연 후 돌아서서 군중 속으로 걸어가는 대략적인 순서를 따릅니다.

눈에 보이는 차이도 있습니다. 돌아서는 동작은 약 2초 늦습니다. 마지막 부분에서 원래 인물은 카메라에 등을 보이지만 고양이는 카메라를 바라봅니다. 움직임 차이가 있는, 창작에 사용할 수 있는 재제작 결과입니다. 안무의 정확한 재현, 군중의 유지, 얼굴만의 교체를 입증하지 않습니다.

BAD: 그린스크린 마네킹을 사무실에 있는 사이트 운영자로 바꿨습니다. 이 WAN 3.0 결과는 캐릭터 시트와 편집한 장면 프레임도 참조로 사용했습니다. 제시한 15초 구간은 마네킹의 춤을 참고하면서 인물과 환경을 함께 바꿉니다. 인물 교체와 장면 재구성을 보여주며, 배경이 그대로 유지된다는 증거는 아닙니다.

두 사례의 입력과 모델은 서로 다릅니다. 작업 절차를 설명하는 예시이며, 조건을 통제한 모델 순위나 성공률 연구가 아닙니다. 당시 수작업으로 했던 준비의 일부는 현재 Recast 작업 공간에서 자동으로 처리합니다.

동영상과 캐릭터 이미지 준비

• 대상을 명확히 선택합니다. 인물이 잘 보이는 짧은 구간부터 시작합니다. 회전, 빠른 손동작, 인물의 교차, 컷 전환이 있으면 검토할 세부 사항이 늘어납니다.
• 필요한 외모를 보여줍니다. 전신을 교체하려면 얼굴뿐 아니라 몸과 옷도 제공합니다. 얼굴만 있는 이미지는 체형과 의상을 명확히 지정하지 않습니다.
• 참조를 명확하게 만듭니다. 여러 사람, 서로 다른 의상, 얼굴을 가리는 글자를 피합니다. Recast에서 이미지 분석 결과를 보고 깨끗한 참조를 추출할지 결정합니다.
• 캐릭터와 장면 지시를 분리합니다. 배경을 계속 참조할지, 의도적으로 새로 만들지 결정합니다. 배경을 바꾸려면 작업 설명에 명시합니다.

어떤 참조 이미지를 사용해야 합니까? 보이는 정보를 교체 범위에 맞춥니다.

세 시점이 담긴 시트도 한 장의 이미지입니다. 이 이미지 유형들을 조건을 통제해 비교하지 않았습니다. 표는 각 이미지가 제공하는 정보를 설명하며 성공률의 순위를 뜻하지 않습니다.

편집하고 공개할 권한이 있는 영상과 캐릭터 이미지를 사용합니다. 실제 인물이라면 본인의 허락을 받으십시오. Recast는 실제 인물 참조에 대한 사용 동의를 확인합니다.

Recast에서 인물 교체하기

1. 자신의 영상용 도구를 엽니다. 상단의 인물·얼굴 교체 영역을 Recast에서 선택합니다. 아래 템플릿 카드는 저희 샘플로 시작합니다.
2. 영상을 업로드하거나 선택합니다. 라이브러리에서 고르거나 최대 200 MB의 MP4/MOV 파일을 업로드합니다. 긴 영상은 미리 자르지 않아도 됩니다. 타임라인에서 구간을 선택합니다.
3. 새 캐릭터를 추가합니다. 이미지를 업로드하거나 기존 자산을 선택합니다. 참조 분석 결과를 확인하고, 추출을 사용한다면 정리된 이미지를 비교한 후 진행합니다.
4. 교체 범위를 선택합니다. 전신 교체는 새 외모를 얼굴, 머리카락, 몸, 옷에 사용합니다. 얼굴만 교체하면 기존 머리카락, 몸, 옷의 유지가 목표입니다. 여러 사람이 나오면 대상을 명확하게 설명합니다.
5. 모델, 해상도, 소리를 선택합니다. 표시된 길이 제한과 요금을 확인합니다. 한 번의 생성 한도보다 긴 구간은 분할 처리할 수 있지만 이음새에서 변화가 생길 수 있습니다.
6. 생성하고 비교합니다. 다운로드하거나 사용하기 전에 전체 결과를 원본과 비교합니다. 시각적 문제가 있으면 해당 장면이나 세부를 특정합니다. 파일이 재생된다고 인물 교체가 잘됐다는 뜻은 아닙니다.

바꿀 부분과 유지할 부분 설명

대상, 새 캐릭터의 참조, 따라갈 연기를 명시합니다. 유지할 외모나 장면 세부는 따로 설명합니다. 다음 지시는 수정해 사용할 출발점이며 사례의 원래 프롬프트가 아닙니다. 입력 참조의 문법은 모델과 인터페이스에 따라 다릅니다.

Replace the lead dancer in the reference video with the character in the reference image. Use the image for the character’s face, hair, body and clothes. Follow the video’s dance sequence, camera movement and shot timing. Aim to preserve the other people and background. Do not add a new performer.

얼굴만 바꾸려면 범위를 명시합니다. 이미지는 얼굴에만 사용하고 원본의 머리카락, 몸, 옷은 유지하도록 요청합니다. 지시는 목표를 설정하지만 모든 프레임을 고정할 수 없습니다. 군중에서는 위치가 바뀐 뒤의 좌우에 의존하지 말고 ‘흰 셔츠를 입은 주인공’처럼 안정적인 특징으로 지정합니다.

첫 프레임 이후의 결과도 확인

• 동일성: 옆얼굴, 회전, 가림, 마지막 프레임에서 원래 캐릭터로 돌아오는지 확인합니다.
• 움직임: 회전, 몸짓, 발동작이 나타나는지만 보지 말고 발생 시점을 비교합니다. STORM의 지연은 원본과 결과를 시간에 따라 비교해야 보입니다.
• 교체 범위: 옷의 혼합, 추가 귀나 얼굴 특징, 놓친 배경 인물, 의도하지 않은 장면 변화를 확인합니다.
• 연속성: 모든 컷과 분할 이음새에서 얼굴, 크기, 빛, 카메라 거리의 변화를 확인합니다.
• 소리: 어느 오디오 트랙이 들어 있는지 확인합니다. 얼굴이 맞아 보인다는 이유만으로 목소리 교체나 입 모양 동기화를 입증할 수 없습니다.

후속 STORM 시도에서는 와이드 숏으로 전환한 뒤 멀리 있는 군중에 사람이 다시 나타났습니다. 여기의 성공 비교에는 그 구간을 넣지 않았습니다. 가장 좋은 정지 화면도 다음 숏의 문제를 숨길 수 있습니다. 저희의 캐릭터 일관성 가이드 는 여러 영상에서 참조를 활용하는 방법을 설명하지만, 이 교체 절차도 숏별 검토가 필요합니다.

다시 시도하기 전에 무엇부터 확인해야 합니까? 문제가 생긴 시점을 찾고 해당 항목을 확인합니다.

매번 입력과 결과를 보관하고 변경 사항을 기록합니다. 이 점검은 확인 순서이며 원인의 증명이나 해결 보장은 아닙니다. 한 번에 입력 하나만 바꾸면 다음 비교에서 변화를 해석하기 쉽습니다.

길이, 소리, 비용

현재 자신의 영상용 교체 작업 공간에서는 작업당 최대 30초를 선택합니다. 한 번의 생성 한도는 모델별로 다릅니다. 이 절차에서 Seedance 2.5는 최대 30초, WAN 3.0은 최대 15초, Kling V3 Omni는 최대 10초입니다. 이는 Recast 통합의 제한이며 제공업체의 모든 인터페이스에 적용되는 한도는 아닙니다.

요금은 모델, 해상도, 처리 길이에 따라 달라집니다. Recast 동영상 요금에는 참조 영상의 초수도 포함됩니다. 선택 사항인 참조 이미지 추출은 별도 요금을 표시하므로 생성 전에 둘 다 확인하십시오. 분할 처리를 해도 여러 유료 생성이 한 번의 무료 생성으로 바뀌지 않습니다.

자신의 영상용 도구는 기본으로 원본 오디오를 유지하거나 모델 생성 환경음을 제공합니다. 템플릿은 생성 환경음 또는 무음을 사용하며 원곡을 포함하지 않습니다. 위 비교 영상은 무음입니다. 생성에는 유료 계정과 크레딧이 필요하고 페이지와 사례 열람은 무료입니다.

인물·얼굴 교체 작업 공간 열기 로 자신의 영상을 사용하거나, 준비된 템플릿 선택 으로 기존 샘플에서 시작할 수 있습니다. 작업 공간은 제출 전에 사용 가능한 옵션과 요금을 표시합니다.

출처와 사례 제작 기록

STORM 주인공과 군중의 재제작은 2026-09-27에 Seedance 2.5로, BAD 춤 사례는 2026-10-09에 WAN 3.0으로 생성했습니다. 비교 구간은 각각 15초입니다. STORM 원본은 GENER8ION과 Yung Lean의 STORM 뮤직비디오 일부이며, BAD 원본은 제공받은 그린스크린 마네킹 춤입니다. 세로 자르기, 음소거, 연결은 표시를 위한 처리이며 새 모델 생성이 아닙니다.

준비 과정과 관찰은 저장한 입력, 프롬프트, 완성 영상에 근거합니다. 작업 제한은 2026-10-12에 Recast와 대조했습니다. 모델 작업의 정의는 Alibaba Cloud의 동영상 생성·편집 문서를 참조하십시오. 이 사례는 얼굴만 교체하는 기능의 신뢰성을 측정하지 않았으며 이후 출력도 보장하지 않습니다.