AI 영상 제작, 지금 어디까지 왔나
솔직히 말하면, 1년 전만 해도 저는 ‘AI 영상’이라는 게 실무에 쓸 수준이 아니라고 생각했어요. 프레임이 뭉개지고, 손가락이 이상하게 붙어 있고, 사람 얼굴이 3초 만에 다른 사람으로 바뀌는 영상들 때문에요. 그런데 올해 들어 분위기가 완전히 달라졌더라고요.
Runway Gen-3, Kling 1.6, 그리고 Sora가 일반 공개되면서 ‘이건 진짜 쓸 수 있겠다’는 생각이 들기 시작했어요. 특히 저처럼 영상 편집 전문가가 아닌 기획자 입장에서, 간단한 컨셉 영상이나 프레젠테이션용 클립을 직접 뽑아낼 수 있게 됐다는 게 체감상 엄청난 변화예요. 이 글은 제가 실제로 써보면서 정리한 툴별 특성과, 실무에서 바로 가져다 쓸 수 있는 워크플로우를 담았습니다.
주요 AI 영상 툴, 뭐가 다른가
툴이 너무 많아서 처음엔 어디서 시작해야 할지 막막할 수 있어요. 제가 실제로 써본 기준으로 정리해드릴게요.
Runway Gen-3 Alpha
현재 실무에서 가장 많이 쓰이는 툴 중 하나예요. 텍스트-투-비디오(T2V)와 이미지-투-비디오(I2V) 둘 다 지원하는데, 특히 I2V 기능이 강점이에요. 정지 이미지를 넣고 카메라 무빙이나 오브젝트 움직임을 지시하면, 꽤 자연스러운 영상이 나와요. 제가 주로 쓰는 방식은 미드저니로 배경 이미지를 뽑은 다음, Runway에서 카메라가 천천히 앞으로 이동하는 방식으로 영상화하는 거예요. 광고 시안용 영상 제작할 때 이 콤보가 꽤 잘 먹혀요.
다만 생성 길이가 기본 4~10초로 짧고, 크레딧 소모가 빠른 편이에요. 정밀한 동작 제어가 필요한 경우엔 아직 한계가 있고요.
Kling AI
중국 콰이쇼우(快手)에서 만든 툴인데, 한동안 해외에서 더 화제였어요. 지금은 국내에서도 꽤 많이 쓰이고 있어요. Kling의 강점은 사람의 동작과 얼굴 일관성 유지예요. 동일한 인물이 여러 장면에서 등장하는 영상을 만들 때 Runway보다 훨씬 안정적인 결과물이 나오더라고요. 최대 2분짜리 영상을 생성할 수 있는 고급 플랜도 있어서, 짧은 브랜드 필름 수준의 작업도 가능해졌어요.
무료 플랜에서도 어느 정도 테스트는 가능한데, 실무 품질을 원한다면 유료 플랜이 필요해요. 프롬프트 언어는 영어가 압도적으로 잘 먹히고, 한국어 입력도 되지만 영어 번역 후 입력하는 걸 추천드려요.
OpenAI Sora
기대를 정말 많이 했고, 실제로 영상 품질 자체는 놀라운 수준이에요. 복잡한 씬 구성이나 물리 시뮬레이션 표현은 현재 공개된 툴 중 가장 뛰어나다고 느꼈어요. 다만 ChatGPT Plus/Pro 플랜에서 접근 가능한데, 생성 시간이 길고 대기 시간 편차가 크다는 게 아쉬운 점이에요. 현재로선 ‘결과물 품질 확인 및 레퍼런스 제작’에는 쓸 만하지만, 반복적으로 여러 시안을 뽑는 실무 작업엔 아직 속도 면에서 불편함이 있어요.
CapCut AI / HeyGen
이 두 툴은 성격이 조금 달라요. CapCut AI는 편집 자동화 중심이고, HeyGen은 AI 아바타 기반 영상 제작에 특화돼 있어요. HeyGen은 특히 교육 콘텐츠나 제품 설명 영상처럼 ‘사람이 직접 말하는 것처럼 보이는 영상’이 필요할 때 유용해요. 내 사진과 스크립트만 넣으면 AI가 립싱크까지 맞춰서 영상을 만들어주거든요. 물론 가까이 보면 어색한 부분이 있지만, SNS 클립이나 내부 교육 영상 수준에서는 충분히 쓸 만해요.
실무 워크플로우: 저는 이렇게 씁니다
툴 소개보다 더 중요한 건 ‘어떻게 쓰느냐’예요. 제가 실제로 AI 영상 제작에 활용하는 방식을 단계별로 풀어볼게요.
1단계: 스크립트와 씬 설계
먼저 ChatGPT나 Claude에 영상의 목적, 타깃 시청자, 전달하고 싶은 핵심 메시지를 주고 씬 구성을 요청해요. 예를 들어 이렇게 프롬프트를 쓰는 편이에요.
프롬프트 예시:
답글 남기기