넷마블이 AI를 쓰는 방법

📌 넷마블 AI&Tech Lab에서 AI 기술을 활용한 콘텐츠 제작 기술의 핵심은 무엇인가?

AI 기술은 다양한 콘텐츠 제작의 본질적인 창작 도구로서, 실감나는 콘텐츠, 비용 효율성, 사용자의 제어성, 감정 표현 등 콘텐츠의 모든 부분에 필수적으로 활용되고 있습니다

💡 AI 기술을 활용한 콘텐츠 제작 사례는?

• 3D 휴먼 캡처: 전문 장비 없이도 고품질의 3D 휴먼 캡처 가능
• 이미지 생성: 텍스트 프롬프트나 이미지 수정을 통해 고품질 이미지 생성
• 비디오 생성: 이미지와 텍스트 프롬프트, 또는 이미지와 모션 정보를 조합하여 비디오 제작
• 3D 콘텐츠 제작: 텍스트 프롬프트와 다양한 뷰 이미지를 활용하여 일관성 있는 3D 콘텐츠 생성
• 게임 개발 협업: 사람이 기획하고 AI가 디테일 보정 및 반복 작업을 수행하는 협업 방식
• 감정 표현 3D 휴먼 제작: 음성 정보만으로 자연스러운 얼굴 표정 생성 및 특정 감정 부스팅 가능

넷마블 ai&Tech Lab의 박성범 팀장은 게임 콘텐츠 제작에 ai기술이 어떻게 활용되는지 소개합니다. 핵심은 ai가 단순히 사람의 일을 대체하는 것이 아니라, 사람과 협업하여 콘텐츠의 퀄리티를 높이는 데 기여한다는 점입니다. 3d 휴먼 캡처, 이미지 및 비디오 생성, 그리고 감정 표현이 가능한 3D 아바타제작 등 다양한 사례를 통해 ai의 역할이 강조됩니다. 특히, 사용자의 제어성과 감정 표현을 가능하게 하는 ai기술은 게임 콘텐츠를 더욱 풍부하고 실감나게 만드는데 중요한 역할을 합니다. 이 발표는 ai가 게임 개발의 본질적인 창작 도구로 자리매김하고 있음을 보여줍니다. 궁극적으로 ai는 게임 세계와 현실 세계 사이의 가치를 연결하는 매개체로서 콘텐츠의 중요성을 더욱 부각합니다.

반응형

1. 🎮 AI와 게임 콘텐츠의 본질적 가치

• AI는 인간의 일을 단순히 대체하는 것이 아니라, 게임 콘텐츠 제작에서 협력하여 새로운 가치를 창출한다는 점이 강조된다 .
• 최신 AI기술을 활용하면 텍스트 프롬프트만으로 지브리풍의 이미지 생성 등 직관적이고 간단한 작업이 가능하다 .
• 넷마블 게임에는 이미지, 오디오, 영상, 애니메이션 등 다양한 콘텐츠가 포함되어 있으며, AI&Tech Lab에서는 이를 위한 AI연구개발을 담당한다 .
• 발표에서는 현실 세계와 게임 세계 사이에서 콘텐츠의 역할을 조명하고, 다양한 AI 콘텐츠 제작사례와 AI의 구체적 역할을 다룰 예정이다 .
• 플레이, 크리에이티브, 커뮤니케이션이 게임의 핵심 키워드이며, 유저가 만든 콘텐츠는 게임 세상에서 실제 세계로 더 많은 가치를 전달하게 된다 .

 

2. 🎥 실감 콘텐츠의 중요성 및 하이피델리티

• 콘텐츠는 실감이 있어야 하며, 이를 위해 구글은 수백 개의 광원과 여러 대의 카메라를 활용해 정밀한 3D 휴먼 구조와 텍스처를 제작하였다 .
• 구글의 사례는 하이피델리티 조건을 충족하는 콘텐츠 제작방법을 보여준다 .
• 마이크로소프트는 믹스 리얼리티 캡처 스튜디오를 통해 더 다이나믹한 3D 모션 캡처가 가능하게 하였으며, 수백대의 카메라를 사용하였다 .
• 믹스드 리얼리티 캡처를 활용한 영상 사례에서는 홀드 플레이와 BTS 퍼포먼스를 통해 현장감과 사실감이 드러난다 .
• 이러한 기술들은 생생한 감정 표현과 높은 실감, 그리고 유저 제작 용이성을 충족하는 콘텐츠 제작의 핵심으로 볼 수 있다 .

 

3. 🎥 가상 영상과 실제 영상의 결합 및 고정밀 퍼포먼스 촬영

• 넷마블은 믹스 리얼리티 캡처 스튜디오를 활용해 이질감 없는 퍼포먼스 영상을 제작하며, 고정밀 촬영이 가능하다고 설명한다 .
• 구글 및 마이크로소프트 사례처럼 수십 대의 전문 카메라 장비가 필요하지만, 일반인에게는 설치와 세팅이 사실상 불가능하다고 지적한다 .
• 여섯 대의 카메라로 수행된 퍼포먼스 캡처에 휴먼 널프라는 AI기술이 활용되어, 일반인도 유사한 3D 캡처를 할 수 있게 되었다고 한다 .
• 이 기술은 어포더블(저렴하고 접근 가능)한 3D 휴먼 캡처 콘텐츠 제작을 가능하게 한다 .
• 고품질과 저비용의 캡처 기술개발에 초점을 맞춘 사례임을 강조한다 .
• 🎨 생성형 AI를 활용한 이미지 및 영상 콘텐츠 생성
  • 최근에는 텍스트 프롬프트입력만으로 AI가 이미지를 생성하는 사례가 늘고 있으며, 챕GPT와 유사한 기술이 활용되고 있다 .
  • AI는 사용자 요청에 따라 강아지, 우주인 등 다양한 이미지를 자동으로 만들어내며, 이미지를 수정하는 것도 가능하다 .
  • 비디오 생성사례에서는, 사용자가 이미지를 업로드하고 텍스트를 전달하면 AI가 수 초 분량의 영상 클립을 자동으로 제작한다 .
  • 하지만, 텍스트 기반 모션 표현은 정밀한 모션 컨트롤이 어려워 기술의 한계도 존재한다고 언급한다 .

 

4. 🎮 AI와 휴먼의 협업으로 이루어지는 콘텐츠 제작

• AI는 텍스트 프롬프트와 유저가 원하는 컨트롤 모션을 직접 전달받아, 보다 디테일한 모션을 반영한 비디오를 제작할 수 있다
• 3D 콘텐츠제작에서는 360도 View에서 일관성을 유지하는 것이 중요하며, AI는 여러 뷰에 이미지를 생성하여 하나의 일관성 있는 3D 콘텐츠를 만든다
• 전체 사례들을 통해, 일상 대화와 같은 프롬프트를 활용하여 고품질 이미지, 비디오, 3D 콘텐츠를 생성하는 방식이 확인된다
• 게임 개발에서는 AI와 휴먼이 협업하는 방식으로, 초안 제작과 디테일 보정이 반복되어 높은 퀄리티의 이미지를 만든다
• AI는 단순히 사람의 일을 대체하는 것이 아니라, 휴먼의 가이드를 받아 협업을 통해 계속해서 디테일을 보완하는 역할을 수행한다
• 컨셉 아트제작에서도 휴먼 원화가는 러프한 스케치를 제공하고, AI는 이를 단계별로 개선하여 고퀄리티 원화를 완성한다
• 최종적으로, 휴먼의 기획과 AI의 협업은 효과적인 창작 프로세스를 가능하게 한다
• 감정을 표현하는 3D 콘텐츠제작에서는 얼굴 표정과 제스처가 핵심이며, 이것이 감정을 효과적으로 전달하는 방법으로 추정된다

728x90

5. 🎭 AI를 활용한 감정 표현 및 얼굴 생성 기술

• 메타의 사례에서는 AI가 오디오 대화를 분석하여 얼굴 표정과 제스처를 생성하며, 이를 위해서 고정밀 캡처 장비가 필요하다고 설명한다 .
• 이러한 방식은 사전 준비된 아바타와 고급 캡처 장비를 통해서만 가능하다고 하며, 비용과 장비의 제약이 있다고 언급한다 .
• 더 저렴한 대안으로 시각 정보와 음성 정보를 결합한 멀티모델 AI가 소개되며, 이를 통해 음성만 입력해도 자연스러운 얼굴 표정을 생성할 수 있다고 주장한다 .
• 기존 AI구조에서는 음성과 감정 표현을 별도 파트로 구분하며, 이를 통해 행복, 두려움 등 다양한 감정 표현이 가능하다고 설명한다 .
• 사례로 보여준 AI결과물에서는 자연스러운 감정 표정을 확인할 수 있으며, 특히 기침이나 코피와 같은 상황에서도 감정을 더 자연스럽게 표현할 수 있음을 언급한다 .
• 감정 표현을 더 부스팅하거나 특정 감정을 강조하는 것도 가능하며, 하나의 얼굴 표현에서 여러 감정을 조절하는 기능도 개발 중임을 시사한다 .
• AI는 이러한 감정 표현이 가능한 휴먼 콘텐츠 제작의 핵심 요소로 자리잡았으며, 기존 콘텐츠 방식을 혁신할 수 있다고 강조한다 .
• 콘텐츠 제작에서 AI는 실감 콘텐츠, 비용 절감, 사용자 제어, 감정 표현 등 다양한 측면을 담당하는 필수 기술로 인식되고 있음을 결론으로 언급한다 .

 

 

 

원본영상 https://youtu.be/m-_W6roI4Bk