매력적인 이미지와 영상을 제작하고자 하는 콘텐츠 크리에이터로서, 저는 며칠 동안 HeyGen AI 비디오 생성기를 사용해 보았습니다.
제 생각에 HeyGen AI 비디오 생성기는 아바타 비디오 제작에 특화되어 개발되었습니다 . 사실적인 아바타, 다국어 지원, 그리고 폭넓은 맞춤 설정 옵션 덕분에 콘텐츠 마케팅에 매우 효과적인 도구입니다.
사진을 업로드하거나 미리 설정된 이미지를 사용하여 아바타 비디오를 만들 수 있습니다. 특히 입 모양, 미묘한 표정, 목소리, 제스처, 몸짓 등이 아바타 비디오에서 서로 잘 어울리도록 만드는 데 이상적입니다.
하지만 긴 영상 콘텐츠를 불러오는 데 시간이 너무 오래 걸린다는 점이 아쉬웠습니다. 그리고 좀 더 전문적인 편집 도구가 있다면 더 좋을 것 같습니다.
이번 포스팅에서는 HeyGen AI 비디오 생성기를 직접 사용해 본 경험을 공유하겠습니다. 텍스트를 음성으로 변환하고 비디오 번역까지, 이 도구를 활용하여 원하는 대로 말하는 멋진 아바타를 만드는 방법을 보여드리겠습니다.
처음부터 제작을 시작하세요
시작하기 위해 메인 페이지 왼쪽 상단에 있는 '동영상 만들기' 버튼을 클릭했습니다.
여기서 저는 두 가지 옵션을 보았습니다. 하나는 매우 자연스러운 목소리를 가진 디지털 음성인을 생성하는 방법이고, 다른 하나는 립싱크 기능을 사용하여 음성을 번역하는 방법이었습니다. 마치 영상을 여러 언어로 제공하는 것과 같았습니다.
저는 아바타 영상을 제작하는 것으로 시작했고, 처음부터 다시 시작하기로 했습니다.
공개된 아바타 프리셋 모음이 있었어요. 제 사진을 업로드해서 새로운 아바타를 만들 수도 있었고요. 그래서 "새 아바타 만들기"를 클릭해서 과정을 시작했어요. 여자 프로필 사진을 업로드하고 이름, 나이, 성별, 인종을 입력했죠.
그러고 나서 대본을 입력했어요. "안녕하세요! 만나서 정말 반가워요! 저는 새로운 곳을 탐험하고 새로운 것을 시도하는 걸 정말 좋아해요. 가장 좋아하는 모험은 뭐예요? 우리 같이 재밌는 시간을 보내봐요!"
다음은 결과 영상입니다.
제가 생성한 디지털 아바타는 사진을 업로드해서 그런지 동작이 많지 않습니다. 더 사실적이고 생동감 있는 결과물을 원하시면 2~5분 정도 말하는 모습을 영상으로 녹화해 보세요. 손을 흔들거나 간단한 동작을 추가하셔도 좋습니다. 배경은 단색 벽이나 그린 스크린이 좋고, 음질 향상을 위해 외장 마이크 사용을 권장합니다.
정밀한 제스처 제어
다음으로, HeyGen 이 아바타의 몸짓, 움직임, 심지어 미묘한 표정까지 제어할 수 있는지 테스트해 보기로 했습니다.
초창기 이미지 기반 아바타 생성기는 입과 머리 움직임만 인식했고, 이후에는 몸짓까지 지원할 수 있게 되었습니다. 이제 헤이겐 AI는 사용자의 지시에 따라 몸짓을 직접 제어할 수 있는 효과적인 솔루션을 제공하며, 그 성능 또한 매우 뛰어납니다.
이 기능을 테스트하기 위해 다른 팝 걸그룹의 이미지를 업로드하고 동작을 맞춤 설정했습니다. 그 여성은 랩 동작을 선보이고 있습니다.
결과는 훌륭했습니다. 거의 모든 동작이 지시와 음성에 정확히 부합했습니다. 몸짓도 자연스러웠고, 무엇보다 손가락이 거의 부러지지 않았습니다.
다음은 제가 테스트한 스크린샷입니다. 동작이 끊임없이 변하는 상황에서도 손가락의 개수와 모양이 항상 안정적이고 고품질로 유지되는 것을 확인할 수 있습니다. 일반적으로 손가락의 모양과 개수를 표현하는 것은 AI 비디오 및 이미지 생성에서 큰 난제인데, HeyGen AI는 이를 훌륭하게 해냈습니다.
더 정확하게 지시하고 싶다면 "위쪽을 가리키기"와 같은 설명을 명령문에 추가할 수도 있습니다. 그러면 지시에 따라 동작하지만, 단점은 가끔씩 같은 동작을 반복할 수 있다는 것입니다.
립싱크
현재, 입술 움직임과 아바타의 움직임을 동기화하는 것은 텍스트를 아바타로 변환하는 데 있어 기본적인 기술입니다. 초기에는 정면만 지원했지만, 지금은 측면도 지원합니다. 하지만 캐릭터의 움직임이 너무 빠를 경우, 대부분의 도구가 제대로 작동하지 않거나 오류가 발생할 수 있습니다.
이 성능을 테스트하기 위해 사람 말소리의 속도 한계에 가까운 빠른 랩을 입력했고, 노래 효과도 테스트하고 싶었습니다.
아래 영상에서 보시다시피, 제 기대에 거의 부합합니다. 빠른 속도의 립싱크 동작을 더 자세히 확인하기 위해 영상을 240% 확대하고 소녀의 얼굴에 초점을 맞춰 보았습니다.
립싱크와 몸짓 모두 매우 정확했습니다. 특히 인상적이었던 건 가사에 맞춰 즉흥적으로 표현한 고개 끄덕임이었는데, 제가 특별히 지시한 것도 아닌데도 완벽하게 소화해냈습니다. HeyGen AI가 공식 자료에서 말하는 '미세 표정'이 바로 이런 겁니다.
영상 번역
제가 강조하고 싶은 또 다른 흥미로운 기능은 HeyGen AI 비디오 생성기의 비디오 번역 기능입니다. 이 기능을 사용하면 입술 움직임을 동기화하면서 170개 이상의 언어로 비디오를 번역할 수 있습니다.
결과물의 품질을 보장하기 위해, 저는 HeyGen의 가이드라인에 따라 업로드하는 영상에는 화자가 한 명만 포함되어야 하고 배경 음악이나 소음이 없어야 한다는 점을 확인하고 테일러 스위프트의 인터뷰 영상을 업로드했습니다.
다음은 결과 영상입니다.
저는 영어를 중국어로 번역하고 영상에 자막을 추가했습니다. 보시다시피 번역된 음성이 화자의 입 모양과 완벽하게 일치하여 자연스럽고 매끄러운 시청 경험을 제공합니다.
기존 더빙 방식과 비교했을 때, 이 방식은 시간을 크게 절약해 주었고 시청자들의 시청 경험을 향상시켜 주었습니다.
헤이겐 에 대한 최종 평가: 장점과 단점
요약하자면, HeyGen AI가 생성한 아바타는 매우 사실적입니다. 입술 움직임, 미세한 표정, 미묘한 몸짓까지 모두 매우 현실적입니다. 텍스트, 음성, 동작, 표정까지 완벽하게 일치하며, 손가락 생성이나 몸짓과 같은 까다로운 부분까지도 훌륭하게 구현해냅니다.
게다가 HeyGen AI의 영상 번역 기능은 혁신적입니다. 영상 번역과 더빙을 더욱 쉽고 자연스럽게 만들어 전 세계 시청자들과 더 효과적으로 소통할 수 있도록 도와줍니다.
하지만 몇 가지 눈에 띄는 단점도 있습니다. 첫째, 긴 영상을 제작하려고 할 때 속도가 매우 느릴 수 있습니다. 둘째, 전문적인 영상 편집 도구가 부족합니다. 이 때문에 전체적인 편집 과정이 번거로울 수 있습니다.
전반적인 경험은 좋지만, 이러한 문제들은 제 사용자 경험을 다소 저해할 수 있습니다.
Pollo AI 의 AI 아바타 비디오 생성기로 더 많은 가능성을 탐색해 보세요.
HeyGen 보다 더 나은 AI 아바타 영상 생성 도구를 찾으신다면 Pollo AI 사용해 보시길 추천합니다!
Pollo AI 몇 번의 클릭만으로 사진에서 아바타 비디오를 만들 수 있는 AI 아바타 비디오 생성기 와 제품 비디오 제작을 위한 AI 제품 아바타 기능을 제공합니다.
생성된 아바타는 단순히 말하는 얼굴만 보여주는 것이 아니라, 실제 사람과 같은 자연스러운 움직임을 보여줄 수 있습니다. 아래 예시를 통해 어떤 모습인지 확인해 보세요.
다양한 음성 라이브러리가 제공되므로 아바타에 어울리는 독특한 음성을 언제든지 찾을 수 있습니다.
Pollo AI 단순한 AI 아바타 제작을 넘어, AI 기반 비디오 제작에 필요한 모든 것을 지원합니다. 예를 들어, 캐릭터, 사물 또는 장면 이미지를 업로드하고, Pollo AI의 일관성 있는 캐릭터 비디오 생성기를 사용하여 이러한 요소들이 조화롭게 통합된 비디오를 제작할 수 있습니다.
Pollo AI의 또 다른 주요 특징은 다양한 비디오 도구입니다. AI 비디오 확장기를 사용하면 원본의 무결성을 손상시키지 않고 새로운 요소를 추가하고 비디오 길이를 늘릴 수 있습니다. motion control 통해 정적인 캐릭터 이미지를 실감 나는 연기로 바꿀 수도 있습니다.
더욱 흥미로운 점은 Pollo AI 에는 YouTube 인트로 영상 , 여행 영상 , 픽사 영상 등 소셜 미디어 플랫폼과 빠른 스토리텔링에 적합한 다양한 콘텐츠를 손쉽게 제작할 수 있는 앱이 있다는 것입니다.
텍스트를 비디오로, 이미지를 비디오로 변환하는 최고의 AI 비디오 모델들을 하나의 플랫폼에서 모두 만나보실 수 있습니다. Google Veo 3, Hailuo 02, Seedance, PixVerse V4.5, Kling 2.1 등 다양한 모델을 사용해 보실 수 있습니다.
결론
제 생각에는 HeyGen AI 비디오 생성기를 이용하면 아바타 영상 제작과 영상 번역에 아주 좋은 선택입니다. 수년간 개발되어 온 이 도구는 텍스트, 음성, 동작, 제스처, 미묘한 표정까지 하나의 아바타 영상에 잘 녹여낼 수 있습니다.
하지만 더 강력한 AI 아바타 비디오 생성기가 필요하거나 더 다양한 AI 비디오 제작 기능을 살펴보고 싶다면 Pollo AI 사용해 보시길 추천합니다!