👀 AI 영상 제작을 위한 최소한의 지식

안녕하세요, 캐럿 팀입니다 🙂

AI 영상, 만들어보면 생각보다 까다로운데요. 이미지는 한 장만 잘 나오면 되지만, 영상은 신경 쓸 게 훨씬 많거든요. 여러 장면에 걸쳐 일관성도 유지돼야 하고, 카메라 움직임도 어색하지 않아야 해요.

그래서 캐럿 팀이 AI 영상 제작을 처음 시작하실 때 읽어보면 좋을 「떠먹는 AI 콘텐츠 가이드: 영상 편」을 만들었어요. 이번 뉴스레터에서는 가이드에 담긴 핵심 내용을 몇 가지 소개해드릴게요.

AI 영상 생성 방식을 먼저 이해해야 해요

AI 영상 생성 방식은 이미지와 같이 크게 4가지로 나눠서 생각해볼 수 있어요. 이것을 이해하는 게 중요한 이유는 목적에 따라 활용해야 하는 생성 방식이 다르기 때문이에요.

캐럿 팀은 기본적으로는 R2V 방식을, 시각적 의도를 정확하게 구현하는 게 중요할 때는 I2V 방식을 추천 드려요. R2V 방식은 일관성을 잘 유지하면서도 멀티컷 생성이 가능하기 때문에 더 간편하게 자연스러운 영상을 뽑을 수 있거든요.

R2V는 2가지를 준비해야 해요

R2V를 잘 쓰려면 먼저 두 가지를 잡아두는 게 좋아요.

첫 번째는 스토리보드예요. 몇 초 동안 어떤 장면이 이어지는지, 캐릭터가 어디에서 무엇을 하는지, 카메라가 어떻게 움직이는지 미리 나눠두는 거예요

두 번째는 레퍼런스예요. 캐릭터, 제품 형태, 장소 분위기, 브랜드 색감처럼 영상 전체에서 유지되어야 하는 기준을 이미지로 잡아두는 방식이에요. 이때 등장인물은 일관성 유지를 위해 캐릭터시트 형태로 제작하는 것을 권장해요.

이 두 가지가 있어야 프롬프트도 훨씬 선명해져요. AI에게 “무엇을 유지하고, 어디에서 움직임을 줄지”를 더 정확히 알려줄 수 있으니까요.

실제 사례를 전체 가이드에서 확인해보세요

「떠먹는 AI 콘텐츠 가이드: 영상 편」에서는 프롬프트 기본 구조 및 사례 뿐만 아니라, 실제 R2V 방식으로 30초 영상을 생성하는 과정이 단계별로 소개되어 있어요.

AI 영상 제작을 처음 시도하는 팀이라면, 전체 흐름을 잡고 AI 영상 퀄리티를 높이는 데 도움이 될 거예요. 아래 버튼을 눌러 전체 가이드북을 무료로 확인해보세요!

⚡️ 최신 AI 트렌드

1. 할리우드가 AI를 적극적으로 받아들이고 있어요

구글 딥마인드가 인디 영화사 A24에 약 7,500만 달러, 한화로 따지면 약 1,000억 원을 투자했어요. A24는 '문라이트'랑 '에브리씽 에브리웨어 올 앳 원스'로 아카데미 작품상을 두 번이나 받은 스튜디오죠. 그런데 이번 투자는 영화를 직접 찍으려는 게 아니라, 스토리보드나 사전 제작 같은 워크플로우에 AI를 어떻게 끼워넣을지 같이 연구하기 위한 목적이며, A24 안에 AI 연구 랩까지 새로 들어선다고 해요.

반대로 영화사가 AI 쪽에 돈을 쓰는 경우도 있어요. Lionsgate가 생성 AI 기업 Runway의 지분을 확보했거든요. 사실 2024년부터 Runway 모델을 자사 영화·TV 라이브러리로 미세조정해서 프리비주얼 작업에 써왔는데, 이번엔 아예 기존 IP를 활용한 AI 숏폼 에피소드 시리즈를 공동 제작하겠다고 발표했어요.

두 사례는 돈의 방향이 정반대예요. 구글은 영화사에, Lionsgate는 AI 회사에 투자했으니까요. 그런데 결국 향하는 지점은 같습니다. AI가 기존 영화 제작 워크플로우를 적극적으로 대체하기 시작했다는 거, 그리고 'AI 콘텐츠'라는 게 별도의 영역이 아니라 AI가 그냥 콘텐츠 제작의 일상적인 도구가 되는 흐름이라는 거예요.

2. 없는 제품을 진짜처럼 광고하는 크리에이터가 터졌어요

인스타그램에 404product라는 한국 크리에이터가 있어요. 프로필 소개가 “없는 제품도 광고하는데 있는 제품은 얼마나 더 잘하겠어요”인데, 이름 그대로 세상에 존재하지 않는 제품의 광고를 AI로 만들어 올려요. 최근에 X(트위터)에서 크게 퍼졌고, a16z의 Justine Moore가 영어로 자막을 달아 공유하면서 3,700개가 넘는 좋아요를 받았어요.

대표작 하나를 보면, 등에 착 달라붙는 손 모양의 작은 기기가 에어컨 역할을 해주는 광고예요. 만원 지하철이나 야구장에서 이 손이 등에 붙어서 부채질해주는 건데, 제품은 없지만 영상은 실제 광고처럼 보여요. 

여기서 재밌는 지점은 “AI로 만들었다”는 게 더 이상 단점이 아니라는 거예요. 아이디어가 좋고 연출이 정교하면, 실제 제품이 있든 없든 사람들이 보고 싶어 한다는 거죠. 광고 콘텐츠를 기획하는 분이라면, AI가 대체로 찍어주는 시대가 아니라 기획력이 훨씬 더 중요해지는 시대가 오고 있다는 걸 체감할 수 있을 거예요.

3. 일본 애니메이션 스타일로 재창작한 월드컵

요즘 월드컵 재미있게 보고 계신가요? 요즘 월드컵 경기 장면을 일본 애니메이션처럼 바꾼 영상이 유행하고 있어요. 실제 경기 장면 위에 손그림 애니메이션 질감을 입혀서 스포츠 하이라이트와 팬아트 사이 어디쯤 있는 콘텐츠를 만드는 건데, 노르웨이 vs 프랑스를 중세 판타지 애니로, 스페인 젊은 선수들을 소년 만화 주인공처럼 재해석한 영상이 대표적이에요.

개별 영상마다 조회수가 수백만을 찍고 있고, 틱톡과 릴스에서는 매일 새 버전이 올라오고 있죠. 2026 월드컵이 AI 영상 생성 도구가 폭발적으로 보급된 뒤로 치러지는 첫 대회라서, 이런 팬메이드 콘텐츠가 그 어느 때보다 빠르게 퍼지고 있어요.

우리나라를 응원하는 의미에서, 월드컵 관련 콘텐츠를 한번 만들어보는 건 어떨까요?

오늘도 끝까지 읽어주셔서 감사합니다 😊

다음 주에도 실무에 바로 써볼 만한 AI 콘텐츠 팁과 함께 돌아올게요.

캐럿 팀 드림