AI로 제작! 초보자가 AI 동영상 생성 도구 DomoAI로 뮤직비디오를 만드는 방법과 요령

최근 생성형 AI의 발전으로 동영상 제작의 진입 장벽이 크게 낮아져, 누구나 쉽게 애니메이션 동영상을 만들 수 있는 시대가 열렸습니다.

안녕하세요. Ny@Tech(냐테크)입니다.

원래는 웹 마케팅 분야에서 오랫동안 활동했지만, 2024년 무렵부터 생성 AI의 가능성에 관심을 갖고 이미지 생성 AI, AI 작곡 도구, AI 동영상 생성 분야를 다루기 시작했습니다.

현재는 AI로 뮤직비디오(MV)를 만드는 작업 흐름을 탐구하고 있습니다.

2025년 9월에는 AI의 발전을 상징하는 사건으로, ChatGPT 개발사 OpenAI가 최신 동영상 생성 모델 "Sora 2"를 발표했습니다.

Meta와 Google에서도 동영상 생성 도구가 잇따라 등장하며, AI 업계에서 "동영상 생성"이 새로운 경쟁 무대가 되고 있습니다.

그중에서도 특히 주목받는 것이 몇 분 만에 고품질 애니메이션 영상을 생성할 수 있는 "DomoAI"입니다.

‍

DomoAI는 2023년 싱가포르 기업이 개발한 차세대 동영상 생성 AI 도구입니다. 전문 기술이 없어도 몇 분 만에 전문가 같은 영상을 만들 수 있습니다.

DomoAI를 비롯한 생성 AI를 활용하면 누구나 품질 높은 뮤직비디오를 만들 수 있게 되었습니다.

이 글에서는 웹 마케팅 분야 출신인 제가, 초보자도 AI 도구로 뮤직비디오를 만드는 과정과 요령을 알기 쉽게 설명합니다.

AI로 제작! 뮤직비디오 제작의 흐름

바로 생성 AI를 활용한 뮤직비디오 제작 과정을 살펴보겠습니다.

뮤직비디오 제작은 크게 네 단계로 정리할 수 있습니다.

1. 음악 만들기

먼저 뮤직비디오의 바탕이 되는 음악을 준비합니다.

직접 작곡한 음원이 있다면 그것을 사용하면 되지만, 많은 분은 오리지널 곡이 없을 것입니다.

이럴 때 AI 작곡 도구를 쓰면 몇 분 안에 자신만의 곡을 만들 수 있습니다.

예를 들어 AI 작곡 서비스 Suno에서는 가사와 장르만 입력하면 감정이 풍부한 곡을 생성할 수 있습니다.

2. 이미지 소재 준비(소재 수집과 생성 AI 활용)

실제 풍경, 소품, 여러 곳에 쓸 수 있는 장면을 직접 촬영하거나 Adobe Stock 같은 소재 사이트에서 이미지를 준비합니다.

뮤직비디오만의 "세계관"과 "이야기"를 표현하는 환상적인 배경이나 캐릭터 비주얼은 생성 AI를 활용하면 표현의 폭을 넓힐 수 있습니다.

예를 들어 다음과 같은 장면은 AI 이미지 생성 도구와 잘 맞습니다.

• 가사의 세계관에 맞는, 현실에 없는 배경
• 이야기의 주인공이 될 애니메이션 캐릭터
• 분위기를 만드는 추상적인 이미지 컷(빛 입자, 압축된 공간 등)

이러한 비주얼은 Midjourney, Stable Diffusion 또는 DomoAI의 "텍스트→이미지 생성" 기능으로 "가사에 맞는 세계관"을 구현할 수 있습니다.

‍

3. 동영상 생성(AI로 영상화)

준비한 이미지 소재를 바탕으로 DomoAI에서 동영상 클립을 생성합니다.

DomoAI의 "이미지로 동영상 만들기(Image to Video)"를 사용하면 정지 이미지에 움직임을 넣은 영상을 쉽게 만들 수 있습니다.

‍

"AI 아바타(Talking Avatar)" 기능으로 캐릭터 이미지에 립싱크를 넣어 마치 노래하는 듯한 움직임도 재현할 수 있습니다.

이처럼 곡의 각 부분에 맞춰 여러 영상 컷을 AI로 생성하고 장면별로 구분해 사용하는 것이 뮤직비디오 제작의 기본 흐름입니다.

4. 편집과 마무리

마지막으로 생성한 영상 클립을 연결해 뮤직비디오로 완성합니다.

어려운 조작은 필요하지 않습니다. 동영상 편집 소프트웨어나 앱에서 다음과 같이 편집합니다.

1. 음악 파일 가져오기
2. 곡의 타이밍에 맞춰 이미지와 동영상 배치
3. 불필요한 부분 자르기
4. 필요에 따라 자막과 효과 추가

마지막으로 내보내면 완성입니다.

다음 장부터 이 과정을 원활하게 진행하기 위한 구체적인 사항을 설명하겠습니다.

뮤직비디오에 필요한 소재와 이미지 구상

뮤직비디오를 원활하게 제작하려면 어떤 영상 컷이 필요한지 미리 구상하고 그에 맞는 소재를 준비해야 합니다.

특히 다음 여섯 가지 요소를 미리 갖추면 영상의 다양성이 높아질 뿐 아니라 제작하면서 고민하는 일도 줄어듭니다.

배경

곡의 세계관을 전하는 바탕이 되는 풍경이나 배경 이미지입니다.

노을 진 해변, 도시의 야경, 가까운 미래의 도시, 우주 공간 등 가사나 곡의 분위기에 맞는 장소를 선택합니다.

전신(롱 샷)

캐릭터나 인물의 전신이 보이는 컷입니다.

전주, 간주, 도입부처럼 곡의 분위기를 전하고 싶은 장면에 사용하면 효과적입니다.

배경과 함께 "무대인지, 도시인지, 환상의 세계인지"를 알려 주어 시청자가 뮤직비디오 전체 세계관의 중심을 상상하게 할 수 있습니다.

상반신 클로즈업(바스트 샷)

가슴 위쪽이나 얼굴 표정이 잘 보이는 가까운 거리의 컷입니다.

후렴이나 감정이 고조되는 부분에 캐릭터 표정에 집중한 상반신 클로즈업을 넣으면 시청자의 감정 이입을 유도합니다.

AI 아바타(Talking Avatar)와 결합하면 실제로 노래하는 듯한 연출도 가능합니다.

뒷모습

피사체를 뒤에서 포착한 컷입니다.

인물의 뒷모습이나 등 실루엣은 애수와 여운을 연출하는 데 효과적입니다.

곡의 분위기에 따라 일부러 표정을 보여 주지 않고 등 뒤에서 바라보는 샷을 넣으면 이야기를 더할 수 있습니다.

소품(디테일 컷)

곡이나 장면과 관련된 소품을 보여 주면 시청자가 이야기를 상상하게 하는 효과가 있습니다.

예를 들어 "사랑"이 주제라면 꽃다발, 반지, 편지, 짝을 이룬 잔처럼 가사에 등장하는 상징적인 물건을 보여 주어 영상에 깊이와 변화를 줄 수 있습니다.

리듬을 시각화하는 연출 컷

곡의 비트와 리듬을 "눈으로 느끼게 하는" 연출 소재입니다.

소리에 맞춰 움직이는 도형, 깜박이는 빛, 추상적인 입자 애니메이션 등을 넣으면 영상과 소리가 동기화되어 시원한 느낌이나 그루브를 강조할 수 있습니다.

천둥, 심장 박동, 신호등의 깜박임, 시계 초침, 이퀄라이저 애니메이션(※)을 배경에 겹치는 것도 한 방법입니다.

※음악의 파형이나 저음부터 고음까지 주파수의 움직임을 그래픽으로 시각화하는 연출

‍

개인정보 보호

DomoAI 같은 AI 서비스에 이미지나 음성 파일을 올릴 때 "데이터가 무단으로 사용되지는 않을까?", "제삼자에게 공유되지는 않을까?"라고 걱정하는 분도 있을 것입니다.

하지만 DomoAI의 이용약관에는 사용자가 업로드한 이미지와 동영상 데이터가 AI 처리 목적 외에는 저장되거나 공유되지 않는다고 명시되어 있습니다.

※기록을 남기지 않고 동영상을 생성하는 "고스트 모드" 기능도 있습니다.

이러한 소재를 미리 준비하면 장면 전환이 매끄러워지고 시청자가 지루해하지 않는 구성을 만들 수 있습니다.

다음에 설명할 "장면 설계(사전 준비)"를 먼저 해 두면 필요한 소재의 종류와 수량이 명확해져 불필요한 생성이나 다시 찾는 일을 줄일 수 있습니다.

뮤직비디오 제작 전 준비(음악 편집과 장면 설계)

소재를 준비한 뒤 영상 생성에 들어가기 전에 "설계 작업(계획)"을 하면 제작이 수월해집니다.

이 단계에서는 곡을 충분히 들으며 "어느 타이밍에 어떤 영상을 넣을지" 구성합니다.

먼저 준비한 음원을 편집 소프트웨어나 앱에 가져와 장면을 바꿀 지점에 마커를 찍거나 파트별로 나눕니다.

가사와 곡 구성에 맞춰 "이 구간은 배경", "여기는 캐릭터 클로즈업"처럼 넣을 장면을 색으로 구분하거나 메모하면 어떤 소재를 생성하거나 배치할지 한눈에 알 수 있습니다.

소리의 파형, 즉 비트와 고조되는 부분에 맞춰 전환하면 영상의 리듬이 자연스러워지고 "소리에 영상이 올라탄" 듯한 편안함이 생깁니다.

‍

뮤직비디오 구성에 맞춘 영상 설계 예시

장면 설계를 더 구체적으로 떠올릴 수 있도록 일반적인 뮤직비디오 구성을 바탕으로 "어느 부분에 어떤 영상이나 이미지를 넣을지" 예시를 정리했습니다.

장면 유형

영상 연출의 의도와 활용법

연주 장면(전주·간주)

도입부와 간주에는 풍경이나 리듬을 시각화한 연출 컷을 넣어 곡의 분위기를 전달합니다.

A멜로·B멜로

A멜로·B멜로에서는 가수의 전신이나 상반신 클로즈업을 보여 주고 가사에 맞춰 표정을 드러냅니다.

후렴

가장 고조되는 후렴에는 캐릭터 클로즈업에 빛 입자나 카메라 움직임 같은 연출을 더합니다.

아웃트로·엔딩

마지막에는 인물의 뒷모습이나 석양처럼 여운을 남기는 영상으로 마무리합니다.

가사와 파트별 영상 계획을 세우면 필요한 소재를 빠뜨리지 않고, 나중에 편집할 때 "어떤 영상을 어디에 배치할지" 고민하지 않게 됩니다.

구성을 미리 확정하면 AI로 생성할 컷 목록이 명확해져 불필요한 생성을 줄이고 효율적으로 제작할 수 있습니다.

DomoAI의 기본 기능 소개

이제 DomoAI를 사용해 영상을 만들겠습니다.

이 장에서는 DomoAI의 기본 기능과 뮤직비디오에 유용한 활용법을 설명합니다.

DomoAI에는 여러 기능이 있지만 뮤직비디오 제작에서 알아둘 주요 기능은 "스타일과 템플릿", "AI 아바타(Talking Avatar)", "화면 키잉(크로마키 합성)" 세 가지입니다.

하나씩 자세히 살펴보겠습니다.

스타일과 템플릿으로 다양한 영상 표현에 도전하기

DomoAI에서는 "스타일(모델)"이라는 시각적 표현 방식을 선택할 수 있습니다.

애니메이션풍, 실사풍, 유화풍, 3D 만화풍 등 30가지 이상의 비주얼 스타일이 준비되어 결과물 분위기를 바꿀 수 있습니다.

스타일 지정은 다음 기능에서

• 동영상으로 동영상을 만드는 "Video to Video"
• 텍스트로 이미지를 생성하는 "Text to Image"

활용할 수 있습니다.

‍

이러한 스타일을 선택하면 곡의 장르나 분위기에 맞춰 영상의 표현을 바꿀 수 있습니다.

예를 들어 J-POP은 일본 애니메이션, 차분한 발라드는 수채화나 유화풍처럼 곡과 잘 어울리는 비주얼을 시도해 보세요.

AI 아바타(Talking Avatar)로 캐릭터 노래하게 하기

다음으로 소개할 기능은 "AI 아바타(Talking Avatar)"입니다.

정지 이미지의 캐릭터에 입 움직임인 립싱크와 표정 변화를 더해 말하거나 노래하는 듯 보이게 하는 DomoAI의 인기 기능입니다.

준비한 캐릭터 일러스트나 사진을 업로드하고 Suno 등으로 생성한 보컬 음원을 넣으면 "캐릭터가 노래하는 듯한 영상"을 만들 수 있습니다.

사용법은 간단합니다.

1. 메뉴에서 "AI 아바타(Talking Avatar)" 선택
2. 왼쪽에는 움직일 이미지, 오른쪽에는 노래하게 할 음성 데이터 업로드

이것만 하면 됩니다.

‍

다만 음성은 보컬만 있는 데이터를 업로드해야 합니다.

악기 소리가 섞이면 반주 타이밍에도 립싱크가 반응해 의도하지 않은 입 움직임이 생기기 때문입니다.

프롬프트에 "미소", "슬픔" 같은 감정 지시를 더하면 립싱크에 표정 변화를 넣을 수도 있습니다.

‍

‍

‍

이 기능은 뮤직비디오 속 캐릭터에 생동감을 주어 시청자를 끌어들이는 연출을 가능하게 합니다.

‍

화면 키잉으로 영상을 자유롭게 결합하기

화면 키잉은 일반적으로 크로마키 합성이라고 부르는 기술로, 특정 배경색을 나중에 투명하게 처리해 다른 영상이나 배경으로 교체하는 작업을 말합니다.

예를 들어 앞서 소개한 AI 아바타(Talking Avatar)로 노래하는 캐릭터 영상을 생성할 때 배경을 초록색이나 원하는 단색으로 설정하면 나중에 다른 배경 동영상과 결합할 수 있습니다.

사용법은 간단합니다. DomoAI에서 캐릭터 영상을 생성할 때 "화면 키잉" 토글을 켜고 배경색을 선택하면 됩니다. 기본은 초록색입니다.

DomoAI｜화면 키잉 기능

배경으로 사용할 이미지나 동영상을 편집 소프트웨어에 가져온 뒤, 그 위에 초록색 배경의 캐릭터 영상을 배치합니다. "크로마키 합성"으로 초록색을 제거하면 캐릭터만 배경에 자연스럽게 어우러진 합성 영상이 됩니다.

이렇게 크로마키 합성을 활용하면 따로 생성한 AI 영상들을 결합해 하나의 장면으로 만들 수도 있습니다.

창의력에 따라 영상의 가능성을 넓히는 기법이니 시도해 보세요.

영상에 움직임을 더하는 템플릿

영상의 매력을 높이는 데 카메라 워크, 즉 카메라의 움직임과 각도는 중요한 요소입니다.

실사에서는 카메라를 움직여 현장감을 표현하지만 DomoAI에서는 템플릿과 프롬프트를 활용해 캐릭터와 배경 등에 움직임을 줄 수 있습니다.

예를 들어 "이미지로 동영상 만들기(Image to Video)" 템플릿에서는 줌 인이나 크레인 업 같은 시점 이동, 키스나 포옹 같은 연출 동작을 선택해 적용할 수 있습니다.

‍

생성할 때부터 "움직이는 영상"으로 만들기 때문에 피사체와 배경의 원근감이 자연스럽게 계산되어 실제 촬영한 동영상 같은 입체감이 생깁니다.

‍

프롬프트로 카메라 워크를 지시하는 예시

프롬프트에 카메라 워크 지시를 포함하면 AI가 의도를 읽어 영상의 시점 움직임에 반영하는 경우가 있습니다.

프롬프트 작성에 참고할 수 있도록 카메라 워크 지시 예시를 소개합니다.

‍

‍

프롬프트의 카메라 워크 지시가 반영되는 방식은 원본 이미지의 구도와 피사체에 따라 크게 달라집니다.

의도한 움직임이 나오지 않으면 이미지를 바꾸거나 프롬프트 표현을 조금씩 조정하면서 시험해 보세요.

Standard 이상 요금제에서는 "Relax 모드"를 이용할 수 있어 크레딧을 소비하지 않고 여러 번 생성 테스트를 할 수 있습니다. 시행착오를 거쳐 이상적인 뮤직비디오 장면을 만들어 보세요.

AI 영상 제작의 저작권과 윤리에 관한 주의점

지금까지 AI를 활용한 이미지·영상 제작 방법을 설명했지만 반드시 기억해야 할 중요한 사항이 있습니다.

바로 "저작권"과 "윤리(가짜 콘텐츠)" 문제입니다.

저작권에 관하여

DomoAI로 생성한 영상과 이미지의 저작권은 기본적으로 생성한 사용자 본인에게 귀속됩니다.

즉, 자신이 AI로 만든 콘텐츠는 상업적으로도 사용할 수 있습니다.

다만 주의할 부분이 있습니다. 바로 "AI에 입력하는 소재"입니다.

• 유명 애니메이션 캐릭터의 이미지를 허락 없이 사용
• 연예인 사진을 무단으로 가져와 AI에 학습시킴
• 상표나 브랜드 요소를 허락 없이 사용

이러한 행위는 저작권·초상권·상표권 침해에 해당하며 약관에서도 금지합니다.

윤리(가짜 콘텐츠)에 관하여

AI 동영상 기술이 발전하면서 가짜 동영상인 딥페이크를 악용하는 사례가 전 세계적으로 늘고 있습니다.

실제 인물에게 하지 않은 말을 하게 하거나 존재하지 않는 사건의 영상을 만들어 사기에 이용하는 사례가 여러 나라에서 보고되고 있습니다.

특히 "AI로 거짓 뉴스 영상을 생성하고 퍼뜨려 사람들을 의도적으로 속이는" 행위는 창작이라는 이름을 악용한 악의적인 정보 조작이며, 절대 허용되어서는 안 된다고 생각합니다.

오해를 줄 수 있는 영상이라면 "이 영상은 AI로 합성한 것입니다" 같은 설명을 붙이는 것이 크리에이터로서의 배려라고 생각합니다.

정리

예전에는 전문 지식이 필요했던 뮤직비디오 제작도 Suno, Midjourney, DomoAI 같은 생성 AI 도구가 등장하면서 진입 장벽이 크게 낮아졌습니다.

이제 누구나 직접 작곡하고 그 곡에 자신만의 영상을 결합해 공개할 수 있는 시대입니다.

여러분도 이번 기회에 AI를 활용한 뮤직비디오 제작에 도전해 보세요.

처음부터 어렵게 생각하지 말고 단순한 구성에서 시작하는 것이 포기하지 않는 요령입니다.

‍