ℹ️ 빠르게 발전중인 생성 AI 기술 중 주목할만한 모델을 큐레이션해서 보내드리는 뉴스레터에요. ✉️
ℹ️ 최신 논문과 연구 사례를 살펴보고 생성 AI 기술의 발전 동향을 미리 파악하고 대비할 수 있어요. 🧑💻
ℹ️ 어려운 기술 용어 지양하고 데모 영상과 이미지 위주로 전달드려요. 데모 영상은 웹페이지에서 재생 가능해요. 📺
Vchitect 2.0
- Vchitect 2.0은 최대 720x480의 해상도와 10~20초의 동영상 길이를 지원하는 20억 개의 파라미터를 갖춘 고품질 동영상 생성 모델입니다.
- 사용자가 임의의 종횡비로 동영상을 생성할 수 있고 초고해상도, 프레임 삽입, 사용자가 조정 가능한 콘텐츠 보정 기능 등이 특징입니다.
- 50억 개의 파라미터가 포함된 더 큰 버전도 개발 중이며, 향후 출시될 예정입니다.
Demo👇
GameGen-O
- GameGen-O는 오픈월드 비디오 게임 제작을 위해 특별히 설계된 최초의 AI 모델로, 고도로 창의적이고 인터랙티브한 콘텐츠 제작을 지원합니다.
- 역동적인 환경, 복잡한 액션, 다양한 이벤트와 같은 게임 기능을 시뮬레이션하여 실시간 게임플레이 시뮬레이션이 가능합니다.
- 모델을 학습시키기 위해 100개 이상의 차세대 게임에서 데이터를 소싱하여 만들어졌으며 교육 프로세스는 텍스트-비디오 및 멀티모달 지침을 결합하여 비디오 게임 콘텐츠를 대화형으로 생성하고 제어할 수 있도록 지원합니다.
Demo👇
GameGen-O: Open-world Video Game Generation
[Arxiv] [Github] [Huggingface space]
gamegen-o.github.io
GenMS
- GenMS는 간단한 자연어 명령어에서 결정 구조를 생성하는 시스템으로, 재료 과학 연구에 도움을 주는 것을 목표로 합니다.
- 언어 모델이 화학 공식과 같은 중간 세부 사항을 생성하고 확산 모델이 실제 결정 구조를 생성하는 2단계 프로세스를 사용합니다.
- 그래프 신경망은 생성된 구조의 속성을 예측하여 사용자의 요구와 머티리얼 속성을 모두 최적화합니다.
Demo👇
DualGS
- 기존 Volumetric 비디오는 VR 환경에서 몰입감 넘치는 경험을 제공하지만, 현재 방식은 광범위한 수작업이 필요하고 대용량 파일을 생성합니다.
- DualGS는 가우시안 모델을 사용하여 동작과 외모를 분리하여 효율성을 개선하고 중복을 줄이는 새로운 접근 방식 입니다.
- 고압축으로 실시간 재생을 제공하여 프레임당 필요한 저장 공간을 약 350KB로 줄여 VR 애플리케이션에 더욱 실용적입니다.
Demo👇
TransGS
- GauFace는 고품질 실시간 렌더링을 위해 가우시안 기반 방식을 사용하여 얼굴 애니메이션을 더욱 사실적이고 효율적으로 만드는 새로운 기술입니다.
- TransGS는 얼굴 모델을 GauFace 표현으로 빠르게 변환하여 애니메이션과 편집을 쉽게 할 수 있는 툴입니다.
- TransGS는 기존 컴퓨터 그래픽(CG) 방식에서 사용되는 것과 유사한 조명 및 편집 옵션을 활성화하여 페이셜 애니메이션 워크플로를 간소화합니다.
Demo👇
의견을 남겨주세요