텍스트 투 비디오 프롬프트 예시 AI

20분을 들여 완벽한 설명을 작성했는데 2004년 화면보호기 같은 결과물이 나왔다면, 그럼에도 이유가 있다. 최고의 AI 텍스트 투 비디오 프롬프트 예시 AI들이 공통으로 가진 원리는 같다. 4개 층, 그 순서, 그리고 다른 건 없다. 이 가이드에서는 그 구조를 알려주고, Runway, Kling, Veo 3, Sora, Pika에 바로 복사해서 쓸 수 있는 프롬프트들을 모아뒀다. 이론만 갖고 봤자 소용없고, 예시도 작동하는 이유까지 알아야 한다.

모든 모델이 이해하는 4단계 공식

비디오를 생성하는 모든 모델(Runway Gen-4든 Kling 3.0이든 Sora든)은 프롬프트를 거의 같은 방식으로 처리한다. 먼저 피사체를 만들고, 환경을 그려낸 다음, 뭐가 움직이는지, 어디서 보는 건지를 파악한다.

공식은 이렇다:

피사체 (누구인가, 무엇인가. 최소 하나의 시각적 특징 포함) + 액션 (뭐가 일어나는가. 물리적이고 눈에 보이는 것) + 카메라 (샷 타입과 움직임) + 무드 (조명과 분위기)

이 순서다. 피사체가 먼저, 카메라가 나중에. 카메라가 무드보다 먼저다. 순서를 섞으면 모델이 명령어들을 평균내버리고 진흙탕 같은 결과물이 나온다.

작동하는 프롬프트:

빨간 코트를 입은 여자가 밤 빗 내린 거리를 따라 천천히 걷고 있다. 뒤에서 따라가는 트래킹 샷. 네온사인이 물 위에 반사된다. 영화적인 그레인. 24mm 렌즈.

작동하지 않는 프롬프트:

누군가가 걷는 분위기 있는 영화 같은 비 내린 밤 장면을 만들어줘.

두 번째 버전은 모델에게 피사체 정체성, 움직임 방향, 카메라 위치에 대해 동시에 너무 많은 자유도를 준다. 모델이 추측한다. 그리고 그 추측은 대부분 평범하다.

한 가지 규칙: 카메라 수식어는 2-3개로 제한하자. Prompt Architects가 Veo 3과 Kling에서 200개 프롬프트를 테스트한 결과, 카메라 명령어가 3개를 넘으면 결과물이 충돌하는 명령어들 사이를 평균내서 불안정한 움직임을 만든다. 샷 타입 하나. 움직임 하나. 끝.

Runway Gen-4 프롬프트: 장면 전환이 아니라 움직임 방향

Runway Gen-4는 5초와 10초 클립을 생성한다. 그 시간으로는 여러 장면을 전환하기엔 부족하다. 프롬프트가 두 가지 다른 환경이나 두 가지 피사체 상태를 암시하면 Gen-4는 그 사이를 흐릿하게 만들고 둘 다 제대로 못 준다.

Gen-4가 특별히 잘하는 건 복잡한 카메라 움직임이다. 돌리 샷, 크레인 리빌, 군중을 통과하며 따라가기. 카메라 움직임을 구체적으로 설명하고 명확하게 설정된 피사체 하나를 줘라.

Runway Gen-4용 복사해서 쓸 수 있는 프롬프트:

회색 늑대가 얼음 호수 가장자리에 서 있다. 카메라가 천천히 앞으로 돌진해서 그 눈만 화면을 채운다. 평탄한 겨울 빛. 물 위의 안개. 슬로우 모션. 채도 제거됨.

도자기 머그가 부엌 카운터 위에 놓여 있고 그 안에서 증기가 올라온다. 타이트한 클로즈업 고정 샷. 왼쪽 창에서 들어오는 따뜨한 아침 빛. 얕은 피사계심도. 미세한 포커스 래킹 (증기에서 머그 표면으로).

새벽에 어촌으로 천천히 내려오는 드론 공중 촬영. 아래 목재 배들. 항구 위 안개. 차가운 파란 톤. 마을에 움직임 없음. 천천히 틸트 시프트 아래로.

Gen-4에서는 피할 것: 다른 장소로 자르라고 하기, 전후 비교 요청, 클립 중간에 시각적 스타일 바꾸기. 각 프롬프트를 움직이기 시작하는 단 하나의 사진으로 생각해라.

이거 가져가.

Kling 3.0 프롬프트: 카메라는 맨 뒤에

Kling의 공식 프롬프트 가이드는 이 순서로 프롬프트를 만들 것을 추천한다: 피사체 설명, 피사체 액션, 장면 환경, 그리고 맨 마지막에 카메라 명령어. 논리는 모델이 먼저 세계를 만들고 그 안을 어떻게 움직일지 생각한다는 것.

Kling 3.0으로 테스트한 40개 프롬프트에서, 카메라를 뒤에 두는 구조가 카메라 언어를 앞에 두는 것보다 훨씬 깔끔한 움직임 일관성을 만들어냈다. 피사체가 클립 전체에서 제대로 유지되고, 움직임이 보정되는 게 아니라 연속적으로 느껴진다.

Kling이 깔끔하게 다루는 6가지 핵심 움직임: 팬, 틸트, 줌, 트래킹/돌리, 롤, 페데스탈. 하나를 고르자. 두 개 필요하면 명시적으로 조합해라. "천천히 위로 틸트하면서 왼쪽으로 팬."

Kling 3.0용 복사해서 쓸 수 있는 프롬프트:

서예 화가가 흰 종이 위에 한글 글씨를 붓으로 쓰고 있다. 붓이 천천히 종이를 가로질러 움직인다. 조용한 방의 희박한 나무 책상. 부드러운 산란 창 빛. 카메라 고정. 붓질이 마르면서 천천히 줌인.

오전 3시의 도시 교차로. 텅 빈 거리. 신호등이 색을 바꾸며 순환한다. 젖은 아스팔트 위. 천천히 지면에서 가로등 높이까지 페데스탈 샷. 차갑고 노란 소디움 빛. 보행자 없음.

해질녘의 절벽 위 오래된 등대. 아래로 부서지는 파도. 등대 빔이 4초마다 회전한다. 정적인 중간 샷. 폭풍 같은 푸른-회색 하늘. 높은 명암.

Kling이 현재 이기는 분야: 물체 물리학. 프롬프트에 액체, 천, 무게감 있는 뭔가가 포함되면 Kling 3.0이 현재 최고다.

Veo 3과 Sora: 사운드와 물리학이 장면에 들어올 때

Veo 3이 네이티브 오디오 생성을 도입했다. 이게 Veo용 프롬프트 작성 방식을 바꾼다. 이제 사운드를 장면의 일부로 설명할 수 있고 모델이 그것을 동기화해서 생성한다. "배 나무의 삐걱대는 소리", "먼 천둥", "파도 철판 위의 빗소리" 이런 요소들이 이제 유효한 프롬프트 요소고 결과물을 낸다.

Sora 2는 현재 어느 모델보다도 내러티브 호 구조를 잘 다룬다. Runway와 Kling이 단일-장면 엔진으로 가장 잘 작동하는 반면, Sora는 더 긴 클립에서 피사체 일관성을 유지할 수 있고 전후 관계를 암시한다. 프롬프트가 궤도를 가질 수 있다.

Veo 3용 복사해서 쓸 수 있는 프롬프트 (오디오 레이어 포함):

해질녘 돌다리 아래에서 첼로를 연주하는 거리 음악가. 활 손의 클로즈업. 오디오에 부드러운 주변 에코. 위 가로등의 따뜨한 앰버 빛. 천천히 표연자 주변을 따라가는 트래킹 샷. 늦가을. 땅 위 낙엽.

시골의 조용한 파도 철판 지붕 위 빗방울. 각 방울이 오디오에서 구분되고 뚜렷하다. 카메라는 지붕 표면에 고정된 클로즈업. 부드러운 회색 흐린 빛. 얕은 피사계심도.

Sora 2용 복사해서 쓸 수 있는 프롬프트 (내러티브 호):

노란 레인코트를 입은 인물이 텅 빈 고속도로 아래로 카메라 쪽으로 걸어온다. 카메라가 뒤로 트래킹하면서 그들이 가까워진다. 하늘이 흐린 회색에서 완전한 폭풍으로 변한다. 코트의 바람이 보인다.

하얀 식탁보 위의 빨간 와인 잔. 천천히 돌리 백 해서 텅 빈 레스토랑이 드러난다. 늦은 저녁 빛이 사라진다. 뒤 배경에 마지막 초 꺼진다.

조명은 건너뛰고 있는 변수

대부분 프롬프트는 피사체와 카메라를 명명하고는 멈춘다. 조명이 결과물을 흥미롭게 만들거나 평범하게 유지하는 것. 그리고 이게 렌더링된 것처럼 보이는 샷과 실제로 촬영된 것처럼 느껴지는 샷을 분리하는 수단이다.

일관되게 독특한 결과물을 만드는 조명 설명:

• Practical light만: 장면 자체에서 나오는 빛. 초, 화면, 네온, 불. 다큐멘터리 스타일 현실감을 만든다.

• 역광 또는 Contre-jour: 밝은 광원 앞의 피사체. 높은 명암, 실루엣 경향, 극적이다.

• 단일-소스 방향성: 한 방향에서 특정 각도로 명시된 한 개 조명. "오른쪽 3시 방향에서 거친 측면 빛." 모델들은 시간 위치를 이해한다.

• 반사와 채우기: 부드럽고 간접적인 빛. "하얀 벽에서 반사된 부드러운 산란 빛." 포트레이트와 클로즈 상품 샷에 유용하다.

• 시간대 단서: 새벽, 블루 아워, 황금시간, 시민 황혼. 각각이 모델들이 인식하고 일관되게 적용하는 특정 색 온도를 담는다.

가장 빠른 방법은 임팩트를 보기 위해: 위의 모든 프롬프트를 가져가서 조명 설명을 제거해라. 두 버전을 다 실행해라. 차이가 처음 3초에 나타난다.

Pika와 Luma Dream Machine: 짧은 루프와 텍스처 작업

Pika는 짧고 통제된 움직임 루프를 잘 다룬다. 상품 애니메이션, 정적인 패럴렉스 미묘함, 단일 고립된 제스처. Luma Dream Machine은 텍스처가 풍부한 주제에서 빛난다: 물, 불, 천, 식물. 다른 목적으로 사용해라.

Pika용 복사해서 쓸 수 있는 프롬프트 (움직임 루프 초점):

검은 벨벳 위의 은색 향수 병. 단 한 번의 천천한 360도 회전. 유리의 면에 빛이 잡힌다. 스튜디오 하얀 빛. 매끄러운 루프.

천천히 펼쳐지는 꽃 봉오리. 매크로 클로즈업. 초록 보케 배경. 자연 빛. 자르지 않음. 부드러운 루프.

Luma Dream Machine용 복사해서 쓸 수 있는 프롬프트 (텍스처와 환경):

밀집한 가을 숲. 천천한 나무 사이 밀어내기. 전경에서 떨어지는 낙엽. 반점 있는 황금 빛. 얕은 피사계심도. 손 들었던 느낌. 위 캐노피의 흐린 하늘.

하얀 모래 위 얕은 바다. 카메라가 수직으로 직접 아래를 보고 있다. 아래 작은 물고기의 그림자가 보인다. 맑고 파란-초록색. 모래 패턴을 움직이는 미세한 해류.

물질 구체성에 반응을 잘한다: "하얀 모래", "풍화된 참나무", "광택 콘크리트", "거친 아마포".

지금 복사할 20개 프롬프트

사용 경우별로 정렬했다. 주제에 맞는 모든 모델에 바로 떨어뜨려라.

사람과 포트레이트:

1. 60대 여자가 나무 테이블에서 편지를 읽고 있다. 낮은 창에서 오는 자연 빛. 타이트한 숄더 샷. 종이에 천천한 줌인. 조용한 방.

2. 회색 슈트의 남자가 유리와 강철 복도에서 카메라에서 멀어져 걷는다. 카메라가 뒤로 트래킹한다. 형광 오버헤드 빛. 끝 날씨 속도.

3. 클로즈업: 아이의 손이 점토로 구조를 만들고 있다. 따뜨한 부엌 빛. 카메라 고정. 얼굴 없음. (Veo 3에 추가할 것: 조용한 주변 사운드)

상품과 광고: 4. 어두운 돌 표면 위의 시계. 천천한 회전. 뒤에서 한 개의 림 빛. 검은 배경. 다른 요소 없음. 5. 타코 위에 천천한 모션에서 붓는 핫소스 병. 클로즈업. 생생한 색깔. 정면에서 직접 오는 따뜨한 식품 사진 빛.

풍경과 환경: 6. 해질녘의 소금 평야. 카메라가 낮은 각도에서 표면을 따라 트래킹한다. 얇은 물 층에서 반사된 하늘. 바람 없음. 순수한 고요함. 7. 밀밭 위 뇌우. 거리에 번개 맞음. 텅 빈 넓은 샷. 5초 유지. 카메라 움직임 없음. 8. 새벽 2시의 도쿄 거리. 도로 위 빗. 네온 반사. 천천한 포커스 래킹 (전경 웅덩이에서 배경 간판으로).

추상과 텍스처: 9. 검은 대리석 위에 붓는 액체 금. 클로즈업. 고속 슬로우 모션. 올라오는 증기. 카메라 움직임 없음. 10. 탱크 물 속으로 떨어지는 파란 잉크. 3차원에서 흩어진다. 매크로 클로즈업. 순수한 하얀 배경.

건축과 공간: 11. 버려진 기차역 내부. 부서진 지붕에서 빛 줄기. 천천한 크레인 샷이 바닥에서 천장으로 올라간다. 먼지 입자가 보인다. 12. 포악한 아파트 블록 야간 외부. 빗이 내린다. 층마다 하나의 불 켜진 창. 정적인 고정 넓은 샷. 차갑고 회색인 톤.

내러티브 순간: 13. 테이블 위 전화. 화면이 켜졌다가 꺼진다. 카메라 고정 클로즈업. 늦은 밤 부엌. 프레임에 아무도 없음. 14. 가을 텅 빈 공원 벤치. 떨어지는 낙엽이 그 위를 분다. 천천한 줌인. 회색 아침 빛. 15. 해 비친 정원을 향한 문이 천천히 닫힌다. 카메라가 어두운 방 안. 바깥에서 자연 역광.

자연과 동물: 16. 여우가 새벽 자작나무 숲을 통과해 걷고 있다. 천천한 나란한 트래킹 샷. 보이는 숨. 갑작스러운 움직임 없음. 17. 노란 꽃 위에 착지하는 벌의 매크로 클로즈업. 슬로우 모션. 부드러운 자연 빛. 초록 보케.

스포츠와 움직임: 18. 스프린터가 시작 블록에 있고 처음 3걸음을 극단적 슬로우 모션. 트랙 레벨 고정 카메라. 스타디움 빛. 19. 이른 아침 평탄한 회색 물 위의 카약이 자르고 지나간다. 직접 위에서 공중 샷. 육지 안 보임.

실험적: 20. 창문턱 물 잔을 통해 본 도시 타임랩스. 전경 잔이 선명하고 배경 도시가 흐리고 움직인다. 해질녘에서 밤으로 전환.

이거 가져가고 리믹스하려면 하고 싶어 해. 근데 여기서 시작해.