이미지 투 비디오 AI 프롬프트 패턴: 사진 한 장을 움직이게 하는 여섯 가지 방법

프레임은 이미 손에 있습니다. 이것이 이미지 투 비디오 AI가 생성기에 장면 설명을 입력하는 것과 다른 이유입니다. 사진이 누구, 어디, 어떤 색, 어떤 빛에 대한 질문에 이미 답해 두었기 때문입니다. 남은 질문은 첫 1초와 마지막 1초 사이에 무엇이 달라지는가 하나뿐입니다.

약한 클립은 대개 잘못된 질문에 답하는 프롬프트에서 나옵니다. 사진을 모델에게 그대로 되설명합니다. 여성, 코트, 젖은 거리. 그러고는 움직임을 우연에 맡깁니다. Luma의 프롬프트 가이드는 이 규칙을 분명히 밝힙니다. 강한 이미지 투 비디오 프롬프트는 이미지 자체가 아니라 움직임을 설명합니다. Wink의 Wan 가이드도 반대편에서 같은 말을 합니다. 의상 색을 다시 언급하는 것은 움직임을 담아야 할 단어를 낭비하는 일입니다.

그래서 유용한 작업 단위는 모션 패턴입니다. 하나의 변화, 하나의 카메라 동작, 하나의 속도를 지정하는 문장 구조입니다. 아래 여섯 가지는 제품, 인물, 풍경, 소셜 루프 전반에서 통하는 패턴이며, 각각 왜 작동하는지와 어디서 무너지는지를 함께 적었습니다.

그림이 아니라 변화를 쓰세요

이미지 투 비디오 프롬프트는 원본 프레임에 보이는 모든 것을 물려받습니다. 물려받지 못하는 것은 의도입니다. 모델은 컵을 볼 수 있지만, 김이 4초 동안 위로 피어올라야 하는지, 카메라가 더 가까이 밀고 들어가야 하는지는 알 수 없습니다.

세 가지 결정이 그 의도를 명시적으로 만듭니다. Kling의 워크스루도 같은 방식으로 이름을 붙입니다. 피사체 움직임, 환경 움직임, 카메라 움직임입니다. 이 중 무엇이 클립을 이끌지 정하세요. 사람이 몸을 돌리는 것은 피사체 움직임이고, 병 주위로 물이 잔물결치는 것은 환경 움직임이며, 천천히 가까워지는 것은 카메라 움직임입니다. 셋은 함께 존재할 수 있지만, 그중 하나가 이 샷이 존재하는 이유여야 합니다.

잊기 쉬운 네 번째 결정이 있습니다. 무엇이 알아볼 수 있는 상태로 남아야 하는가입니다. 얼굴, 라벨, 로고, 제품의 형태 같은 것입니다. 이 제약을 글로 적어 두는 것, 예를 들어 “라벨은 카메라를 향하고 선명하게 유지된다”는 문장은 동사를 하나 더 추가하는 것보다 종종 더 값집니다.

쓰기 전에 움직임 예산을 정하세요

가장 흔한 프롬프트 실패는 움직임 예산이 너무 큰 경우입니다. Pictory 가이드는 하나의 명확한 움직임을 묘사하면 모델이 제대로 작동하지만, 여러 개를 한꺼번에 요구하면 결과가 흐물흐물해진다고 지적합니다. Kling의 안내도 같은 형태입니다. 주요 동작 하나, 그리고 기껏해야 이를 보조하는 움직임 하나입니다.

5초 클립을 위한 실용적인 예산은 다음과 같습니다.

• 주요 변화 하나: 동사와 방향으로 묘사합니다.
• 선택적으로 보조 변화 하나: 가능하면 피사체가 아니라 환경에서 일어나는 편이 좋습니다.
• 카메라 지시 하나: 또는 카메라가 고정되어 있다는 명시적 진술.
• 속도를 나타내는 단어 하나, 그리고 바뀌면 안 되는 것에 대한 제약 하나.

프롬프트에 피사체 동작이 세 개 있다면 두 개를 잘라내세요. 모델은 한정된 움직임을 남긴 하나에 쓰고, 프레임은 일관성을 유지합니다.

패턴 1: 정지한 피사체를 향한 푸시인

가장 안전한 패턴이며, 사진이 제품이나 패키지, 글자가 있는 물건일 때 써야 하는 패턴입니다. 피사체는 아무것도 하지 않고 카메라가 일을 합니다.

“카메라가 병을 향해 천천히 일정하게 밀고 들어가며, 라벨 바로 앞에서 멈춥니다. 병은 움직이지 않고 가장자리와 뚜껑, 라벨은 선명하게 유지됩니다. 배경은 살짝 흐려집니다.”

작동하는 이유: 움직이는 변수가 하나뿐이므로 물체의 기하학적 구조가 그대로 유지됩니다. Pictory가 신뢰할 수 있다고 말하는 카메라 프롬프트도 여기서 시작합니다. 느린 줌, 부드러운 팬, 약간의 돌리 전진입니다.

무너지는 지점: 속도입니다. 너무 많은 거리를 이동하는 푸시는 모델이 가장자리에서 디테일을 지어내도록 만들고, 작은 글씨가 가장 먼저 흔들립니다. 라벨이 중요하다면 이동 거리를 줄이세요.

패턴 2: 절제된 인물의 고개 돌리기

얼굴은 시청자가 가장 먼저 확인하는 부분이므로, 인물 사진은 가장 결과가 좋은 동시에 가장 깨지기 쉬운 피사체입니다. Luma의 인물 예시는 동작을 작게 유지합니다. 피사체가 카메라를 향해 천천히 고개를 돌리고, 머리카락이 약한 바람에 미세하게 흔들리며, 배경에는 부드러운 보케 변화가 남습니다.

“여성이 카메라를 향해 천천히 고개를 돌리며 입을 다문 부드러운 미소를 짓습니다. 머리카락이 약한 바람에 살짝 들립니다. 배경은 부드럽게 초점 밖에 머뭅니다.”

작동하는 이유: 회전은 시작과 끝이 분명한 하나의 연속된 동작이며, 얼굴을 다시 빚지 않고도 움직일 이유를 모델에게 제공합니다.

무너지는 지점: 동사를 쌓는 것입니다. “그녀가 웃고, 돌아서고, 앞으로 걸어간다”는 한 프롬프트 안의 세 개 클립이고, 모델은 보통 그 사이를 모핑하며 해결합니다. 피사체가 이미 카메라를 보고 있다면 미세한 동작을 쓰세요. 눈을 들어 올리기, 숨 한 번, 살짝 기울이기 같은 것입니다.

패턴 3: 풍경과 실내를 위한 시차 드리프트

넓은 장면에는 동작보다 깊이가 필요합니다. 깊이를 만드는 패턴은 거리에 따라 속도가 다른 느린 전진 이동이며, Luma가 풍경 예시를 구성한 방식이 그렇습니다. 카메라가 앞으로 나아가는 동안 구름이 흐르고, 전경 요소가 배경보다 빠르게 지나갑니다.

“카메라가 들판을 가로질러 느리고 고른 속도로 앞으로 드리프트합니다. 전경의 들꽃은 나무 능선보다 빠르게 지나가고, 얇은 구름이 그 위에서 왼쪽에서 오른쪽으로 흐릅니다.”

작동하는 이유: 상대 속도는 모델이 장면을 이해하지 않고도 실행할 수 있는 깊이 단서이며, 피사체에서 아무것도 움직이지 않아도 프레임을 움직임으로 채웁니다.

무너지는 지점: 지평선과 직선적인 건축물입니다. 평평한 면을 가로지르는 긴 이동은 모델이 수직선을 휘게 할 여지를 주므로, 이동 거리를 짧게 유지하고 지평선을 명시하세요.

패턴 4: 주변 요소만 움직이기

때로는 피사체가 전혀 움직이지 않는 것이 정답입니다. 김이 피어오르고, 물이 잔물결치고, 천이 가라앉고, 꽃잎이 열립니다. Kling의 제품 예시는 이렇게 구성됩니다. 색이 흐르며 모이고, 꽃이 피고, 고정된 제품 주위로 파문이 퍼집니다.

“향수병은 프레임 중앙에 완전히 정지해 있습니다. 뒤편에서 가는 안개가 위쪽 오른쪽으로 흘러가고, 바닥에는 얕은 물웅덩이가 부드럽게 잔물결칩니다. 카메라는 고정된 위치를 유지합니다.”

작동하는 이유: 고정된 피사체는 흘러갈 수 없으므로 라벨과 로고, 실루엣이 촬영된 그대로 유지됩니다. 브랜드 정확성이 극적인 효과보다 중요할 때 선택하세요.

무너지는 지점: 침묵이 주는 허가입니다. 피사체가 정지해 있다고 쓰지 않으면 모델이 스스로 작은 흔들림을 더할 수 있습니다. 정지 상태를 명시한 다음, 주변 요소에 방향과 속도를 부여하세요.

패턴 5: 궤도 회전으로 드러내기

궤도 회전은 물체가 아니라 시점을 바꾸므로, 사진 한 장이 여러 위치에서 촬영된 것처럼 느껴지게 합니다. Luma의 제품 예시는 시계 방향의 느린 궤도 회전이며, 시점이 바뀌면서 그림자도 함께 이동합니다.

“카메라가 단색 배경 위의 스니커 주위를 시계 방향으로 천천히 돕니다. 각도가 바뀌면서 부드러운 그림자가 바닥을 가로질러 이동하고, 신발은 형태와 색을 유지합니다.”

작동하는 이유: 이 이동은 형태와 재질을 드러내며, 평면적인 제품 사진이 보여주지 못하는 것이 바로 그것입니다.

무너지는 지점: 텍스트와 포장입니다. 앞면을 지나쳐 도는 궤도는 모델에게 한 번도 본 적 없는 라벨 뒷면을 지어내라고 요구합니다. 라벨을 읽을 수 있어야 한다면 호를 얕게 유지하고 앞면이 카메라를 향한다고 명시하세요.

패턴 6: 반복 재생에 안전한 잔잔한 움직임

짧은 소셜 클립은 반복 재생되는 경우가 많으므로, 움직임은 시작한 곳과 가까운 지점에서 끝나야 합니다. 이 패턴은 돌리나 드러내기처럼 한 방향으로만 가는 이동을 피하고, 완만한 순환을 사용합니다.

“빛이 피사체 위에서 느리고 고른 주기로 숨을 쉬듯 흐르고, 얇은 안개 층이 옆으로 흘러갑니다. 카메라는 고정되어 있습니다. 움직임은 연속적이며 시작 위치로 돌아옵니다.”

작동하는 이유: 순환에는 어긋날 끝점이 없으므로 첫 프레임으로 돌아가는 컷이 보이지 않습니다.

무너지는 지점: 속도입니다. 2초 안에 끝나는 순환은 깜빡임으로 읽히므로, 클립 전체 길이에 걸쳐 느린 한 번의 통과를 목표로 하세요.

유행이 아니라 사진에서 패턴을 고르세요

사진은 어떤 패턴을 감당할 수 있는지 알려줍니다. 라벨이 있는 타이트한 제품 컷은 푸시인이나 궤도 회전, 주변 움직임에는 여지가 있지만 피사체의 연기에는 여지가 없습니다. 프레임을 가득 채운 인물 사진은 회전이나 미세한 표정 변화는 감당하지만 걷기는 어렵습니다. 넓은 풍경은 시차 이동에서 이득을 보고, 실내는 빛과 먼지에서 이득을 봅니다.

원본 품질이 상한을 정합니다. Luma 가이드는 최소 1024x1024 픽셀로 업로드할 것을 권장하고, Wink의 FAQ는 복잡하거나 품질이 낮은 원본이 일관성 떨어지는 움직임을 만든다고 언급합니다. 사진이 흐릿하다면 모델에게 디테일을 지어내라고 요구하는 대신 피사체로 크롭하세요.

가드레일도 같은 프롬프트에 쓰세요

나쁜 생성 결과 뒤에 사람들이 적용하는 수정의 대부분은 첫 프롬프트에 들어 있어야 합니다. Wink의 가이드는 깜빡임, 왜곡, 해부학적 오류에 대한 네거티브 프롬프트를 권장하며, 이 조언은 일반화됩니다. 사라질 때까지 다시 생성하는 대신 원하지 않는 아티팩트를 이름으로 지정하세요.

도구에 별도의 네거티브 필드가 없다면 제약을 긍정문에 넣으세요. “라벨 텍스트는 선명하게 유지되고 변하지 않는다”와 “손은 프레임 밖에 있다”는 각각 특정한 실패를 막습니다. 원본 사진에 있는 것만 설명하는 것도 중요합니다. Wink의 흔한 실수 목록은 이미지에 없는 물건이나 사람을 지어내는 것에서 시작합니다.

그대로 가져다 쓸 수 있는 템플릿

네 줄, 이 순서대로 씁니다.

• 변화: 무엇이, 어느 방향으로, 얼마나 움직이는지.
• 카메라: 푸시, 팬, 궤도 회전, 또는 고정.
• 환경: 있다면 주변 요소 하나.
• 속도와 제약: 느리게 또는 고르게, 그리고 변하지 않아야 하는 것.

탁자 위의 촛불에 적용하면 이렇게 됩니다. “불꽃이 부드럽게 흔들리며 왼쪽으로 살짝 기웁니다. 카메라는 고정된 위치를 유지합니다. 가느다란 연기 줄기가 위로 피어올라 흩어집니다. 느리고 고른 속도. 유리병과 라벨은 선명하게 유지됩니다.”

이 템플릿은 일부러 지루합니다. 지루한 프롬프트는 재현 가능하고, 재현 가능성은 한 번에 변수 하나만 바꿀 수 있게 해줍니다.

첫 1초를 먼저 검토하세요

클립을 판단하기 전에 첫 1초만 따로 보세요. 흐트러짐이 드러나는 곳이 바로 거기입니다. 이미 틀어진 얼굴, 휘기 시작한 라벨, 기울어진 지평선. 시작 프레임이 스틸 사진과 맞지 않는다면 프롬프트가 너무 많은 것을 요구한 것이며, 문장 중간을 다시 써서는 구제되지 않습니다.

생성은 설계상 짧으므로, 긴 테이크 하나를 노리는 대신 연장을 계획하세요. 깔끔한 4초 이동 하나를 얻은 다음, 같은 프롬프트 언어로 세그먼트를 이어 붙여 움직임이 일관되게 유지되도록 하세요.

이 패턴들이 KOOX AI에서 작동하는 방식

KOOX AI의 사진 투 비디오 도구는 이 패턴들이 전제하는 세 단계 구조를 그대로 따릅니다. 선명한 사진을 업로드하고, 움직임과 카메라 느낌을 설명한 다음, 생성하고 다듬습니다. 사진 투 비디오 AI 도구 페이지 또한 피사체가 보이는 선명하고 조명이 좋은 이미지가 가장 강한 결과를 낸다고 언급합니다.

시작 프레임을 먼저 만들고 싶다면 AI 텍스트 투 이미지 도구로 애니메이션할 깔끔한 스틸 이미지를 만들 수 있습니다.