본문으로 이동
[Unite Seoul 2025] Multi Modal과 Neural Rendering을 활용한 유니티 및 센티스 활용 꿀팁
컨퍼런스

[Unite Seoul 2025] Multi Modal과 Neural Rendering을 활용한 유니티 및 센티스 활용 꿀팁

Unite Seoul 2025 유니티 · YouTube

원문 보기

AI 핵심 요약

고품질 3D 환경을 직접 모델링하는 데는 아트 역량과 제작 시간이 필요하고, 기존 디지털 휴먼 데모는 사용자가 먼저 입력해야 반응한다는 한계가 있었습니다. 이를 보완하기 위해 휴대폰으로 촬영한 Unity 사무실 영상을 FFmpeg로 이미지화하고 가우시안 스플래팅으로 공간을 재구성했으며, 사진 촬영과 스플랫 후처리로 결과를 개선했습니다. 이어 PyTorch 등에서 학습한 ONNX 모델을 Unity Sentis로 실행하고 CLIP의 이미지·텍스트 유사도 비교를 적용해, 웹캠 장면을 바탕으로 디지털 휴먼이 상황에 맞춰 반응하는 오피스 투어 데모를 만들었습니다. 간단한 프로토타입에는 이 조합이 유용하지만, 반사 재질과 촬영 블러는 품질을 떨어뜨릴 수 있어 촬영 방식과 후처리를 함께 고려해야 한다고 설명했습니다.

  • 가우시안 스플래팅은 휴대폰으로 촬영한 영상이나 사진을 활용해 3D 공간을 빠르게 구성할 수 있지만, 유리·거울 같은 반사 재질은 노이즈가 생기기 쉽습니다.
  • 영상에서 프레임을 추출할 때 모션 블러가 매칭률을 낮출 수 있으므로, 선명한 사진을 충분히 확보하거나 촬영 조건을 조정하는 것이 중요합니다.
  • Unity Sentis는 모델을 학습하는 도구가 아니라 ONNX 모델을 가져와 여러 플랫폼에서 추론하는 런타임입니다.
  • CLIP은 이미지와 텍스트를 같은 벡터 공간에 매핑해, 사전에 정한 객체 종류를 넘어 장면의 상황이나 행동을 비교·판별하는 데 활용할 수 있습니다.
  • 가우시안 스플랫 편집 도구에서 불필요한 점을 제거하고 투명도나 포인트 크기를 조절해 결과물을 후처리할 수 있습니다.

소개

🔹Multi Modal과 Neural Rendering을 활용한 유니티 및 센티스 활용 꿀팁🔹 지난 4월 15일 개최되었던 Unite Seoul 2025의 세션 레코딩 영상들을 공개합니다! 🎉 Sentis에서 Multi Modal 모델, 3D Gaussian Splatting 생성형 AI 기술과 같이 최근 주목 받는 기술을 유니티에서 활용할 수 있는 방법에 대해 알아보고 이를 활용한 최신 사례를 소개합니다. 🎤 연사자 정보 박우진 / Unity Technologies, Partner Relationship Manager ✨ 추천대상자 프로그래머, 테크니컬 아티스트, 모델러, AI 엔지니어 여러분의 게임 개발 능률을 향상시켜줄 Unity의 유용한 기능 및 사용 방법, 성공 사례와 전략을 소개합니다! 유니티가 직접 큐레이션한 아티스트를 위한 Game(General) 세션 영상을 지금 만나보세요! 📍 Addressables을 사용한 최신 모범 사례 👉 https:/...

비슷한 학습 자료

컨퍼런스 Unite Seoul 2025

🔹Unity ML-Agents를 이용한 컨테이너 적재 최적화, Deep Dive ver.🔹 지난 4월 15일 개최되었던 Unite Seoul 2025의 세션 레코딩 영상들을 공개합니다! 🎉 Unity의 ML-Agents의 기능을 이용하여 선입선출을 필요로 하는 컨테이너 적재의 최적화 문제 해결 과정을 소개합니다. 기본적인 사용법 이외에 실무에서 활용 가능한 문제 해결 방법도 함께 소개하여 세션을 듣는 분들께 ML-Agents의 활용에 대한 도움을 주고자 합니다. 🎤 연사자 정보 전영재 / Unity Technologies, Senior Solutions Engineer ✨ 추천대상자 프로그래머, 머신러닝 엔지니어 여러분의 게임 개발 능률을 향상시켜줄 Unity의 유용한 기능 및 사용 방법, 성공 사례와 전략을 소개합니다! 유니티가 직접 큐레이션한 아티스트를 위한 Industry 세션 영상을 지금 만나보세요! 📍 Unity 기술을 활용한 Smart Factory ...

딥러닝 · 머신러닝 게임 프로그래밍

컨퍼런스 Unite Seoul 2025

🔹Unity와 함께 디지털트윈을 위한 산업용 Asset 효율적으로 관리하기🔹 지난 4월 15일 개최되었던 Unite Seoul 2025의 세션 레코딩 영상들을 공개합니다! 🎉 Unity Industry 제품에 포함되어 있는 Unity Asset Manager를 소개하고, 이를 활용하여 산업용 Asset(CAD, Image, Model 등)을 효과적으로 관리하는 방법을 소개 합니다. 🎤 연사자 정보 김현민 / Unity Technologies, Senior Solutions Engineer ✨ 추천대상자 콘텐츠 관리자(아트 디렉터, 프로듀서), Unity 및 다른 엔진 개발자, 디자이너, 아티스트, 엔지니어 여러분의 게임 개발 능률을 향상시켜줄 Unity의 유용한 기능 및 사용 방법, 성공 사례와 전략을 소개합니다! 유니티가 직접 큐레이션한 아티스트를 위한 Industry 세션 영상을 지금 만나보세요! 📍 Unity 기술을 활용한 Smart Factory 적용과 ...

게임 프로그래밍 CAD · 3D 모델링

컨퍼런스 Unite Seoul 2025

🔹Unity 기술을 활용한 Smart Factory 적용과 사례🔹 지난 4월 15일 개최되었던 Unite Seoul 2025의 세션 레코딩 영상들을 공개합니다! 🎉 Unity가 가진 다양한 기술을 기반으로 스마트 팩토리에 적용할 수 있는 방법을 알아보고, 구축되어 있는 다양한 사례를 살펴보면서 고객들이 실제 적용가능한 방법을 소개합니다. 🎤 연사자 정보 장건우 / Unity Technologies Korea APAC manager, Partner Engineering ✨ 추천대상자 Industry developer, Industry clients 여러분의 게임 개발 능률을 향상시켜줄 Unity의 유용한 기능 및 사용 방법, 성공 사례와 전략을 소개합니다! 유니티가 직접 큐레이션한 아티스트를 위한 Industry 세션 영상을 지금 만나보세요! 📍 Unity 기술을 활용한 Smart Factory 적용과 사례 👉 https://youtu.be/xa6H2S1qiBU...

게임 프로그래밍 클라우드

컨퍼런스 Unite Seoul 2025

🔹소규모 인디개발사의 HDRP 활용 : 스팀,콘솔 게임 개발 과정과 마케팅 전략🔹 지난 4월 15일 개최되었던 Unite Seoul 2025의 세션 레코딩 영상들을 공개합니다! 🎉 이 세션에서는 소규모 개발사가 HDRP를 활용해 게임을 개발하는 과정에 대해 다룹니다. 또한, 유니티의 강력하면서도 간편한 ProBuilder, Timeline, Cinemachine을 인게임에 적용한 사례와, Spline을 활용해 횡스크롤 게임에 입체감과 깊이감을 더하는 방법을 소개합니다. 더불어, 인디게임 개발사의 마케팅 전략에 대한 경험도 함께 공유할 예정입니다. 🎤 연사자 정보 진세광 / ODYSSEYER, CEO ✨ 추천대상자 인디게임 개발 종사자나 개발에 관심이 있는 모든 분 여러분의 게임 개발 능률을 향상시켜줄 Unity의 유용한 기능 및 사용 방법, 성공 사례와 전략을 소개합니다! 유니티가 직접 큐레이션한 아티스트를 위한 Indie/Virtual 세션 영상을 지금 만나보세요...

게임 프로그래밍 게임 아트 · 그래픽

컨퍼런스 Unite Seoul 2025

🔹생성형 AI(ComfyUI)와 유니티 비주얼 이펙트 그래프를 활용한 미디어 아트 실전 제작 팁🔹 지난 4월 15일 개최되었던 Unite Seoul 2025의 세션 레코딩 영상들을 공개합니다! 🎉 최근 생성형 AI 기술의 비약적인 발전에 힘입어, 다양한 리소스 및 기술 생성 기법들이 실감 콘텐츠 산업에 적극적으로 도입되고 있습니다. 본 세션에서는 저희 스튜디오에서 활용한 사례들을 소개하고, 참가자들이 각자의 프로젝트에 효과적으로 활용할 수 있는 실용적인 팁들을 제공할 예정입니다. 🎤 연사자 정보 김성은 / 장면들(SCENES.) 감독 ✨ 추천대상자 디자이너, 테크니컬 아티스트 , 프로그래머,미디어아티스트 여러분의 게임 개발 능률을 향상시켜줄 Unity의 유용한 기능 및 사용 방법, 성공 사례와 전략을 소개합니다! 유니티가 직접 큐레이션한 아티스트를 위한 Graphic/Artist 세션 영상을 지금 만나보세요! 📍 Unity의 VFX: 모범 사례 👉 https:...

인공지능 기타 게임 프로그래밍 게임 아트 · 그래픽

컨퍼런스 Unite Seoul 2025

🔹Unity 프로젝트 개발 시 반드시 체크해야 할 최적화 관련 기능 공유🔹 지난 4월 15일 개최되었던 Unite Seoul 2025의 세션 레코딩 영상들을 공개합니다! 🎉 게임 및 산업 분야 프로젝트 컨설팅을 수행하며 경험해왔던 다양한 프로젝트 사례에서 공통적으로 나타나는 성능 저하 요소의 최적화 방법과 덜 알려져 있지만 유용한 기능 활용에 대해 소개합니다. 🎤 연사자 정보 류태규 Unity Technologies Senior Software Engineer ✨ 추천대상자 프로그래머 📜 발표 자료 https://on.unitysquare.co.kr/3GOXFpT 여러분의 게임 개발 능률을 향상시켜줄 Unity의 유용한 기능 및 사용 방법, 성공 사례와 전략을 소개합니다! 유니티가 직접 큐레이션한 아티스트를 위한 Game(General) 세션 영상을 지금 만나보세요! 📍 Unity 프로젝트 개발 시 반드시 체크해야 할 최적화 관련 기능 공유 👉 htt...

게임 프로그래밍