Runway Gen-4로 AI 영상 편집 – 2026 최신 기능 완벽 실습

AI 영상, 이젠 정말 쓸 만해요

작년까지만 해도 AI 영상은 "데모용"이라는 말이 많았잖아요. 사람 얼굴이 중간에 바뀌고, 배경이 흔들리고. 그런데 Runway Gen-4 써보면 얘기가 달라져요. 같은 캐릭터가 여러 컷에서 일관되게 유지되니까 실제 숏폼·광고 컷에 써먹을 수준이 됐어요.

이 글은 Runway Gen-4를 처음 쓰는 분이 첫 영상을 완성하는 순서를 담았어요. 샘플로 '벚꽃 배경에서 커피 마시는 여성' 10초 컷을 만들어봐요.

1단계: 가입과 인터페이스 파악

runwayml.com에서 가입 후 Dashboard로 들어가세요. 왼쪽 사이드바 Generate - Video 메뉴가 영상 생성 진입점이에요. 상단 모델 선택에서 "Gen-4 Turbo" 또는 **"Gen-4"**를 골라요. Turbo는 속도가 2배 빠르고, 일반 Gen-4는 디테일이 더 살아요.

2단계: 이미지 레퍼런스 준비

Gen-4의 진짜 무기는 레퍼런스 이미지 3장까지 넣을 수 있다는 점이에요.

• 인물 얼굴 클로즈업 1장
• 배경 환경 1장
• 스타일 참고 (필름 톤, 색감) 1장

이 3장을 업로드하면 AI가 세 요소를 섞어서 일관된 영상을 만들어요. 저도 써봤는데, 레퍼런스가 좋으면 프롬프트가 짧아도 결과가 안정돼요.

3단계: 프롬프트 작성 요령

Gen-4는 카메라 움직임을 구체적으로 지시할 수 있어요.

A young woman slowly drinking coffee by a window,
cherry blossom falling outside,
cinematic 35mm film look,
slow dolly-in from wide to medium shot,
soft natural lighting, 10 seconds

한국어로 써도 되지만 영어가 정확도가 높더라고요. 핵심은 '카메라 움직임 + 피사체 행동 + 배경 변화' 세 축을 다 넣는 것이에요.

4단계: 생성과 후편집

Generate 버튼을 누르면 30초~2분 안에 10초 영상이 나와요. 마음에 안 드는 부분이 있으면 Motion Brush 도구로 특정 영역만 다시 그릴 수 있어요. 예를 들어 얼굴은 그대로 두고 배경만 흔들리는 벚꽃으로 바꾸는 식이에요.

길이가 부족하면 Extend 버튼으로 10초씩 이어 붙여요. 최대 40초까지 가능해요.

5단계: 립싱크와 오디오

Act-One 기능을 쓰면 기존에 생성한 영상에 내 얼굴 표정·입 모양을 그대로 옮길 수 있어요. 웹캠으로 30초 녹화하면 AI가 추출해서 기존 영상 인물에게 입혀줘요. 더빙 영상 만들 때 이보다 편한 도구는 못 봤어요.

오디오는 Runway 내장이 아직 약해서, Suno AI로 배경음을 따로 만들어 결합하는 게 좋아요. Suno AI v4 30분 가이드에 실제 제작 순서를 정리해뒀어요.

제가 느낀 Gen-4의 강점과 약점

강점

• 인물 일관성이 진짜 좋아졌어요
• Motion Brush 같은 부분 수정이 직관적이에요
• 카메라 지시어를 잘 알아들어요

약점

• 한국적 얼굴형이 아직 조금 어색할 때가 있어요
• 손가락 5개가 가끔 6개로 나와요 (이건 모든 AI 영상의 숙제)
• 긴 서사 영상은 여전히 어려워요

플랜·요금 정리 (2026-05 기준)

Runway는 크레딧 단위 과금이라 처음엔 헷갈려요. 핵심만 정리할게요.

• Free: 신규 가입 시 125 크레딧 1회 지급. 10초 영상 약 2~3개 생성 가능. 워터마크 포함, 상업 사용 불가
• Standard ($15/월): 625 크레딧/월. 워터마크 제거. 5초 영상 약 30개 또는 10초 영상 15개 분량
• Pro ($35/월): 2,250 크레딧/월. Gen-4 풀 해상도. 영상 1080p 4K 업스케일 가능
• Unlimited ($95/월): Explore 모드에서 무제한 (단, 우선순위 큐). 콘텐츠 크리에이터 추천
• Enterprise: 팀 워크스페이스·SSO·전용 GPU

크레딧 1개는 약 1초 영상 ≈ 5크레딧, 립싱크 Act-One은 별도 25크레딧/분이에요. 처음엔 Standard로 한 달 써보고 사용량 보면서 결정하세요.

카메라 지시어 — 영상 퀄리티를 갈라놓는 단어들

Gen-4가 가장 잘 알아듣는 카메라 동작 키워드를 모았어요. 한 영상에 1~2개만 골라 쓰는 게 좋아요.

• 이동: dolly in, dolly out, pan left, pan right, tilt up, tilt down
• 공중·드론: aerial shot, bird's eye view, crane up, drone fly-through
• 속도: slow motion, time lapse, frozen moment then continue
• 포커스: rack focus from foreground to background, shallow depth of field
• 분위기: cinematic 35mm film, Wes Anderson symmetrical, Christopher Nolan IMAX style

이런 단어를 추가하면 같은 프롬프트인데 영상 격이 한 단계 올라가요.

자주 막히는 6가지 실수와 해결

1. 인물 얼굴이 컷마다 바뀐다 → 레퍼런스 이미지 칸에 인물 클로즈업을 반드시 첫 번째 슬롯에 넣으세요. Gen-4는 첫 슬롯을 메인 캐릭터로 잡아요.

2. 카메라가 의도와 다르게 흔들린다 → 프롬프트 끝에 steady camera, locked tripod를 추가하세요. 반대로 핸드헬드 느낌을 원하면 handheld camera shake.

3. 한국인 얼굴이 어색하다 → 레퍼런스 이미지에 실제 한국인 사진을 넣으세요. 텍스트만으로는 아직 학습 데이터 편향이 있어요.

4. 10초가 너무 짧다 → Extend 기능으로 10초씩 4번까지 이어 붙일 수 있어요. 한 번에 한 번씩만 누르고 결과 확인 후 진행하세요. 중간에 마음에 안 들면 새 컷으로 분기할 수 있어요.

5. 빌드된 영상이 자꾸 모션 블러로 흐려진다 → crisp focus throughout, no motion blur 키워드 추가. 그래도 안 되면 Gen-4 Turbo 대신 일반 Gen-4 사용.

6. 음성·립싱크 어색하다 → Act-One에서 입력 영상을 30fps, 정면 클로즈업으로 찍으세요. 옆모습은 정확도가 절반으로 떨어져요.

실전 워크플로우 — 30초 광고 컷 만들기

제가 실제로 클라이언트 광고 영상을 만들 때 쓰는 순서예요. 참고하면 처음부터 헤매지 않아요.

1. 스토리보드 3컷 작성 (오프닝 5초·메인 메시지 15초·CTA 10초)
2. 레퍼런스 이미지 3장 준비 (브랜드 컬러·메인 인물·환경 무드)
3. 첫 컷 Gen-4로 생성 → 마음에 들 때까지 시드 바꾸기
4. 두 번째 컷부터는 첫 컷에서 추출한 마지막 프레임을 레퍼런스로 사용 (시각적 일관성 유지)
5. Motion Brush로 배경·인물 부분 수정
6. Suno로 BGM 30초 생성 → 광고 톤에 맞게 reggae·corporate·cinematic 등 선택
7. Adobe Premiere나 CapCut에서 자막·로고 삽입 (Runway 내장 자막은 아직 약함)
8. 1080p로 내보내고 Topaz Video AI로 4K 업스케일 (선택)

전체 작업 시간 약 2시간. 외주로 맡기면 30만~80만원짜리 광고 영상을 본인이 직접 만들 수 있어요.

Gen-4 vs Sora vs Kling — 어떤 모델을 언제 쓸까

2026년 5월 기준 메이저 영상 AI 3종 비교예요.

• Runway Gen-4: 인물 일관성·카메라 지시·립싱크 최강. 광고·뮤직비디오·숏폼 추천
• OpenAI Sora: 자연 풍경·물리 시뮬레이션 압도적. 다큐멘터리·CG 컷 추천
• Kling AI (Kuaishou): 한국인·아시아 인물 자연스러움이 가장 높음. K-콘텐츠 추천. 무료 한도가 가장 넉넉

세 도구 다 무료 크레딧이 있으니 한 번씩 같은 프롬프트로 비교해보면 본인 용도에 맞는 게 명확해져요.

실전 활용 — 직군별 추천 시나리오

같은 도구라도 누가 쓰느냐에 따라 활용도가 달라요. 직군별로 가장 효과가 큰 시나리오를 정리할게요.

1인 유튜버

• 짧은 영상 인서트 컷 (강의 영상에 시각화 자료)
• 채널 인트로·아웃트로 자동 생성
• 썸네일용 영상 캡처 추출
• 주간 영상 5~8편 제작 시 외주비 0원 유지

광고 디자이너

• 클라이언트 미팅 전 컨셉 무드보드 영상화
• A/B 테스트용 광고 컷 다양화 (시드만 바꿔 10개 변주)
• 1차 컨펌 후 실사 촬영 여부 결정 가능

프리랜서 마케터

• SNS 광고 영상 5초·15초·30초 버전 자동 생성
• 페이스북·인스타그램·유튜브 숏폼 동시 제작
• 클라이언트 단가 영상 1편 50~150만원에 받을 수 있음

1인 개발자·인디 게임

• 게임 시네마틱 컷씬 시안
• 트레일러 영상 자체 제작
• 캐릭터 일관성을 유지한 컷 시리즈

스타트업 PM

• 제품 데모 영상 빠른 프로토타이핑
• 펀딩용 비전 영상 제작
• 사내 발표·외부 IR 자료 시각화

직군별로 다 다르지만 공통점은 하나예요. 외주 비용·시간이 큰 폭으로 줄어든다는 것. Gen-4는 단순 장난감이 아니라 본격적인 생산 도구로 자리 잡았어요.

저작권·상업 사용 정리 (2026-05 기준)

Runway 약관은 자주 바뀌니 현재 기준만 정리할게요.

• Free 플랜: 워터마크 포함, 상업 사용 불가, 공개 갤러리 노출
• Standard 이상: 워터마크 제거, 상업 사용 허용
• Pro 이상: Asset Privacy 옵션으로 생성 결과 비공개 가능

금지된 사용 사례

• 실존 인물 얼굴을 동의 없이 변환 (특히 정치인·연예인)
• 미성년자 성적 묘사 (즉시 계정 정지)
• 폭력·테러 선동 콘텐츠
• 기존 저작물 직접 모방 (디즈니 캐릭터·아이돌 사진 등)

안전한 활용 패턴

• 가상 캐릭터·일러스트레이션 중심
• 본인 또는 동의받은 인물의 얼굴
• 자연 풍경·추상 모션·제품 클로즈업
• 광고 영상은 클라이언트와 사전 합의된 범위 내

상업적으로 쓰려면 결과물을 보관하면서 어떤 프롬프트·레퍼런스를 썼는지 기록을 남겨두세요. 나중에 클레임이 들어왔을 때 입증 자료가 돼요.

자주 묻는 질문 보강

Gen-4 결과를 4K로 업스케일할 수 있나요? Runway 자체 업스케일러는 1080p까지가 안정적이에요. 4K가 필요하면 Topaz Video AI나 Runway Enhance Speed/Quality 옵션을 추가로 쓰세요. 처리 시간이 2~3배 늘어나는 대신 디테일이 살아나요.

음성 더빙은 어떻게 하나요? Act-One으로 본인 얼굴을 입혀도 음성은 별도예요. ElevenLabs로 다국어 음성을 만들거나, 본인 목소리를 녹음해서 Runway에 업로드하면 립싱크가 자동 맞춰져요.

한국어 자막은 자동으로 들어가나요? Runway 내장 자막은 영어만 정확해요. 한국어 자막은 CapCut이나 Premiere에서 후작업하는 게 정확도가 높아요.

Gen-4와 Gen-3 비교 — 정말 차이가 있나요? 같은 프롬프트·레퍼런스로 비교해보면 차이가 큽니다. 특히 인물 일관성·카메라 지시·복합 동작 (사람이 걸으면서 손짓하는 등) 정확도가 압도적이에요. 단순 풍경이라면 Gen-3 Alpha도 여전히 쓸 만해요.

영상 SEO·업로드 최적화 — 만든 후가 진짜 시작

Gen-4로 멋진 영상을 만들어도 업로드 단계에서 헤매면 노출이 안 돼요. 플랫폼별 핵심을 정리할게요.

• 유튜브 숏츠: 9:16 비율, 60초 이내, 첫 3초에 후크 텍스트 박기
• 인스타 릴스: 9:16 비율, 30~60초, 자막 필수 (대부분 음소거 시청)
• 틱톡: 9:16 비율, 15~60초, 트렌딩 사운드 활용
• 유튜브 롱폼: 16:9 비율, 도입부 15초가 시청 유지율 결정

Runway에서 9:16 생성은 프롬프트에 vertical 9:16 aspect ratio를 명시하거나 출력 시 Aspect Ratio를 9:16으로 선택. 16:9 가로 영상을 강제 크롭하면 인물·텍스트가 잘리니 처음부터 비율 맞춰 생성하세요.

일주일 학습 로드맵 — Gen-4 마스터하기

처음 가입하고 무엇부터 해야 할지 막막할 때 따라 할 수 있는 7일 플랜이에요.

• 1일차: 가입 + 무료 크레딧으로 텍스트→영상 3개 생성
• 2일차: 레퍼런스 이미지 1장으로 이미지→영상 변환 (정확도 체감)
• 3일차: 카메라 지시어 5종 비교 (dolly·pan·tilt·zoom·aerial)
• 4일차: Motion Brush로 부분 수정 연습
• 5일차: Extend로 30~40초 영상 이어붙이기
• 6일차: Act-One으로 본인 얼굴 표정 입혀보기
• 7일차: 실제 프로젝트 1편 완성 (광고·인트로·홍보 중 택일)

이 일주일을 끝내면 Gen-4가 본인의 핵심 도구가 되어 있을 거예요.

지금 당장 해볼 액션

1. Runway 가입하고 무료 크레딧 125개 확보
2. 레퍼런스 이미지 3장 준비 (인물·배경·스타일)
3. 위 프롬프트 예시로 10초 영상 하나 생성
4. 마음에 들면 Extend로 30초까지 이어 붙이기
5. Suno로 BGM 추가 후 인스타 릴스나 유튜브 숏츠에 업로드

처음 영상이 어색해도 괜찮아요. 10개 정도 만들어보면 어떤 프롬프트가 어떤 결과를 내는지 감이 잡혀요. AI 자동화 툴 추천 TOP 7과 엮으면 영상 제작부터 업로드까지 한 번에 자동화할 수 있어요. 한 달이면 본인만의 영상 제작 파이프라인이 구축됩니다.