마이크로소프트 메쉬가 뭔가요?
Azure 가 지원하는 새로운 혼합 현실 플랫폼인 Mesh 는 이번 대회에서 Microsoft 가 공식 발표했습니다. Microsoft 에 따르면 이를 통해 다중 사용자 XR 어플리케이션의 생성을 단순화할 수 있습니다. Mesh 를 Microsoft 가 개발자에게 제공하는 개발 도구로 이해할 수 있습니다. 이를 통해 다수의 XR 애플리케이션을 만들 수 있습니다. Mesh 플랫폼은 서로 다른 물리적 위치를 가진 사람들이 서로 다른 유형의 장치를 통해 가상 이미지 또는 홀로그램 투영으로 공동 작업하고 공유할 수 있도록 하며, 실제 사람들과 상호 작용하는 것처럼 MR 세계의 사람들과 가장 진실한 의사 소통을 할 수 있도록 합니다.
마이크로소프트 흑기술' 홀로 전송' 이 출시되었다. 그것의 MR 플랫폼 그리드는 얼마나 좋은가요?
Kipman 은 "같은 물리적 위치에 있지 않더라도 다른 사람과 콘텐츠를 공유하거나 다른 자기 장치를 통해 콘텐츠를 전송하는 것을 느낄 수 있습니다." 라고 말합니다. Microsoft 측에 따르면 Mesh 는 Microsoft 가 수년 동안 개발한 성과로 손눈 모션 추적과 Hololens 에서 지속적인 홀로그램과 개인화된 가상 이미지를 만드는 인공지능 모델로 발전했다고 합니다. 클라우드 컴퓨팅은 Microsoft 의 핵심 비즈니스이며, Mesh 의 밑바닥은 Azure 입니다. 거대한 컴퓨팅 자원, 데이터, 인공지능 및 MR 서비스 덕분입니다. 그래서 메쉬 클라우드 컴퓨팅의 추가 확장입니다. 메시를 지원하는 홀로그램 전송과 고정밀 가상 캐릭터 얼굴, 모션 추적 모두 컴퓨팅, 하드웨어, 렌더링, 저장 등 많은 문제를 해결하기 위해 클라우드 컴퓨팅이 필요합니다.
Kipman 은 "Azure 스마트 클라우드에서 점점 더 많은 가치를 구축하고 있습니다. 이러한 공동 작업 환경에서는 컨텐츠가 장치나 애플리케이션이 아닌 클라우드에 저장되며 이를 보려면 특별한 렌즈가 필요합니다. " 메시를 지원하는 응용 프로그램을 통해 사용자는 3D 물리적 모델 (작은 가구에서 제트 엔진에 이르기까지) 을 사용할 수 있습니다. ) 지리적 위치에 관계없이. ) 는 * * * 가상 공간에서 자신의 가상 이미지 또는 홀로그램 투영으로 나타나 홀로그램 모델에서 협력합니다.
그렇다면 Microsoft 는 왜 다중 사용자 XR 애플리케이션 개발 플랫폼인 Mesh 를 출시합니까? Microsoft 는 소개에서 MR 이 메인프레임, 개인용 컴퓨터, 스마트폰에 이어 네 번째 PC 로 소비와 상업 분야를 가로지르는 주류가 되고 있다고 밝혔다. MR 은 사람을 화면 경험에서 해방시켜 사람들이 자신의 공간에서 사람이나 사물과 직접 상호 작용할 수 있게 한다. 보도에 따르면 전 세계 수억 명의 사용자가 휴대폰을 통해 닌텐도의 MR 을 체험했고, 50% 가 넘는 포춘지 500 대 기관은 HoloLens 와 같은 MR 솔루션을 사용하여 투자 수익을 높이고 업무 발전을 촉진했다고 한다. 따라서 사람들에게 MR 경험을 가져다 줄 수 있는 앱은 상당히 많을 것이다. 하지만 그렇지 않다. 일부 개발 조건은 개발자 MR 경험의 발전을 제한하기 때문이다. 특히 다음 네 가지 문제가 있다.
1. MR 경험에서 현실을 보여주는 사람은 많은 시간과 자원이 필요합니다.
2. 시간대 간 장치 유형 간 * * * 자기 * * 진동 공간에서 홀로그램을 안정적으로 유지하는 것은 쉽지 않습니다.
3. 고객이 소유한 파일 형식을 지원하기 위해 고화질 3D 모델을 MR 경험에 도입하기가 어렵습니다.
4. 지리적으로 분산된 자기 진동 대화에서 사용자의 동작과 표정을 동기화하는 것은 복잡한 임무다.
이러한 과제를 해결하기 위해 Microsoft 는 복잡한 기술 과제에 대해 걱정할 필요 없이 개발자가 다중 사용자 MR 어플리케이션을 설계할 수 있도록 Mesh 를 출시했습니다.
그리드 기능 표시 및 기술 분석
Microsoft 의 Mesh 에 대한 포지셔닝은 주로 화면 교차, 자연 상호 작용, 실제 뷰 및 사람과의 상호 작용을 위한 경험을 만드는 것입니다. 따라서 플랫폼은 Microsoft 의 기존 HoloLens 플랫폼, MR 헤드 플랫폼 및 기타 일반적인 플랫폼을 중심으로 설계해야 합니다. 실제로 Mesh 플랫폼은 크로스 플랫폼 지원, 클라우드 서비스, LBAR 지원 등에서 향후 XR 어플리케이션의 일부 기능을 정의합니다. 각 기능별로 볼 때, 해당 기업과 서비스가 번창하는 특정 사용자 집단에 직면하고 있습니다.
1. 다른 Microsoft 플랫폼 및 도구와 통신
Mesh 는 Azure 를 기반으로 하며 다른 Microsoft 플랫폼 및 도구와 통신할 수 있습니다. Azure Active Directory 및 Microsoft account 와 같은 id 서비스의 도움으로 사용자는 적절한 인증 및 권한 부여 후 안전하고 신뢰할 수 있는 세션에 액세스할 수 있습니다. Microsoft graphics 를 통해 사용자는 커머셜 또는 소비자 영역의 컨텐츠 및 연락처와 같은 정보에 액세스할 수 있습니다. 또한 개발자로서 청구, 오디오 비디오 전송 등 핵심 인프라와 기본적인 실시간 관리 기능에 대해 걱정할 필요가 없습니다. 핵심 플랫폼 외에도 Microsoft 가 AI 에서 지원하는 핵심 기능을 통해 Mesh 는 Mr 을 위한 대규모 다중 사용자 온라인 (MMO) 시나리오를 구현함으로써 복잡한 기술적 과제를 해결할 수 있습니다.
2. 존재감
메시가 말하는 존재감은 주로 두 가지를 가리킨다. 첫 번째 요점은 아바타를 나타내는 것이다. 다중 사용자 MR 경험에서 서로 다른 유형의 장치는 서로 다른 대표 아바타를 사용하며 사용자는 아바타를 사용자 정의할 수 있습니다. Mesh 는 장치의 내부 및 외부 센서를 통해 표현되는 대표적인 3D 아바타를 사용자에게 제공합니다. Mesh 플랫폼에는 자체적인 아바타와 맞춤형 제작 도구가 있어 직접 사용할 수 있습니다. 또한 이 플랫폼은 AI 구동 동작 모델을 통해 기존 아바타가 사용자 동작과 일치하는 동작과 표정을 캡처할 수 있도록 지원합니다.
두 번째 요점은 실제 360 도 전방위 촬영은 센서를 통해 외부에서 구현될 수 있으며, 카메라 설정은 혼합 현실 캡처 스튜디오를 통해 촬영된 3D 이미지를 하이파이 보존하거나 Azure Kinect 를 사용하여 심도가 민감한 어플리케이션 이미지를 촬영하여 홀로그램 이미지를 생성하는 것과 같이 사용자 정의할 수 있다는 것입니다. 홀로그램이 생성되면 XR 헤드 또는 휴대폰, PC 또는 태블릿에서 그리드 개발 기반 애플리케이션을 활성화하고 홀로그램을 사용하여 사용자에게 제공할 수 있습니다.
3. 공간지도
Mesh 가 등장하기 전에는 각종 설비는 자기만의 국부 세계지도밖에 없었다. Mesh 의 도움으로 로컬로 캐시된 이러한 지도를 병합하고 최적화하여 공간과 환경에 대한 전체적인 이해를 형성할 수 있습니다. 이 프레임워크는 3D 에서 내용을 고정하고, 시각과 공동 작업을 공유합니다. 메쉬는 GPS 에서 찾을 수 없는 공간에서도 GPS 보다 더 정확한 지도를 작성합니다. 특정 관심 지점과 관련된 "세계 잠금 홀로그램" 을 전송하는 데 도움이 됩니다. 또한 그리드는 주어진 객체의 정확한 레이아웃 및 기하학적 정렬과 동일한 이해를 생성할 수 있으므로 개발자는 설명, 서비스 기록 및 기타 중요한 데이터와 같은 시각적 정보와 객체를 정확히 일치시키는 시각적 정보로 덮어써야 할 수 있는 응용 프로그램 객체를 쉽게 작성할 수 있습니다.
4. 홀로그램 렌더링
홀로그램 렌더링은 스마트 에지 클라우드 컴퓨팅 및 스마트 클라우드 아키텍처의 전형적인 예입니다. Mesh 의 지원을 통해 홀로그램 렌더링은 장치의 작동 및 전력 소모가 필요 없는 하이파이 렌더링을 수행할 수 있습니다. Grid 를 통해 개발자는 클라우드 연결을 통해 각 장면 및 모델에 대해 로컬 독립 렌더링 및 원격 렌더링을 선택할 수 있으므로 개발자가 응용 프로그램을 디자인할 때 유연성을 높이고 다양한 장치에 따라 지연 및 충실도를 최적화할 수 있습니다. 또한 홀로그램 렌더링은 대부분의 3D 파일 형식을 지원하며 메시를 지원하는 응용 프로그램에서 로컬 렌더링을 수행하여 공동 작업을 위해 사용자의 기존 3D 모델을 도입하는 문제를 해결합니다.
5. 다중 사용자 동기화
개발자에게 같은 시각의 홀로그램을 만들고 가상 공동 작업 회의에서 서로 소통하는 것은 큰 도전이다. 그리드에서 다중 사용자 동기화를 통해 * * 컨텐츠를 공유하면 참가자의 자세, 동작, 표정 또는 공간 홀로그램의 변화를 업데이트하는 데 도움이 됩니다. 이 모든 것은100ms 의 지연 시간 내에 발생합니다. 같은 물리적 공간에 있든 다른 시간대에 있든 상관 없습니다. 메쉬의 공간 오디오는 다중 사용자 장면에서 동일한 물리적 공간에 있는 느낌을 만들기 위해 이러한 기능을 향상시킵니다.
Microsoft 에 따르면 이러한 기능을 활용하기 위해 Mesh 는 개발자가 다양한 장치 유형에 대한 응용 프로그램을 만들 수 있도록 플랫폼 간 SDK 를 개발자에게 제공합니다. 현재 Mesh 는 C++ 및 C# 와 함께 Unity 를 지원하고 있으며, 향후 몇 달 동안 Mesh 는 Illusion, Babylon 및 React Native 를 지원할 예정입니다. 소프트웨어 개발 키트는 액세스 기능 외에도 개발자가 응용 프로그램에서 사용할 수 있도록 미리 제작된 UX 구조를 제공합니다. 이를 통해 개발자는 자기 진동 경험을 더 빠르고 간결하게 제공할 수 있습니다. Mesh 플랫폼이 등장하면서 이 새로운 기능이 모여 XR 애플리케이션의 특색이 되었습니다. 이러한 융합은 단편적인 기술 방향을 하나로 바꾸어 XR 의 개념을 단계적으로 구체화하는 것이 가장 큰 공헌이다.
메쉬 뒤에있는 아즈어 스마트 클라우드의 가치.
Mesh 를 기반으로 개발된 XR 애플리케이션은 Azure 스마트 클라우드의 가치 덕분에 다양한 분야와 경우에 광범위하게 적용될 수 있습니다. Mesh 의 가상 공동 작업 기능을 통해 시간대 간 사용자가 디지털 방식으로 모여 토론하고 이해할 수 있으므로 데이터를 더 빨리 보고 더 나은 의사 결정을 내릴 수 있습니다. 사용자들은 언제든지 함께 훈련할 수 있다. Holoportation (Microsoft 가 개발한 3D 비디오 캡처 시스템), 홀로그램 공유 및 시각화로 인해 파트너는 길에서 시간과 노력을 들이지 않고도 얼굴을 맞대고 공부할 수 있습니다.
예를 들어, 원격 의료의 경우, 전문가들은 다른 의사들의 진단을 보고, 데이터 보증 지식을 포괄하고, 문제를 더 잘 해결할 수 있습니다. 디자이너와 엔지니어는 함께 3D 설계를 할 수 있으며 팀 구성원은 설계에 참여할 때 다양한 장치를 통해 아이디어와 아이디어를 공유할 수 있습니다. 동료들은 대면 또는 홀로그램 전송을 통해 콘텐츠를 실시간으로 공동 작업할 수 있다. Mesh 의 다중 어플리케이션 시나리오와 azure 는 클라우드 컴퓨팅 플랫폼의 본질을 기반으로 하며 Microsoft Azure 산업과 MR 비즈니스의 확장을 의미합니다.
마이크로소프트 기술연구원 알렉스 킵만 (Alex Kipman) 은 "처음부터 이것이 혼합 현실의 꿈이다" 고 말했다. 사실, 콘텐츠를 공유하는 사람과 같은 곳에 있다는 것을 느낄 수 있고, 물리적으로 함께 있지 않더라도 다른 혼합 현실 장치에서 전송할 수 있습니다. ""
그는 점점 더 많은 사람들이 그리드 플랫폼에서 활동하면서 우리 모두가 Azure 스마트 클라우드의 가치 건설에 참여하고 있다고 믿습니다. 이러한 공동 작업 환경에서 콘텐츠는 현재 사용자의 장치나 어플리케이션에 없습니다. 홀로그램 콘텐츠를 클라우드에 업로드하면 사용자가 착용하는 혼합 현실 장치는 시각 효과와 상호 작용을 담당하는 몰입형 렌더링만 하면 됩니다. 컴퓨팅 능력이 제한된 개인에게 이것은 비약이다. "가장 중요한 것은 Meah 플랫폼에서 XR 응용 프로그램이 점진적으로 발전하고 성숙함에 따라 전례 없는 보안 위험과 네트워크 보안 사건이 주목받고 있다는 것입니다. Azure 기반 지능형 클라우드 메이아 플랫폼에서 제공되는 새로운 AltspaceVR 경험을 통해 기업은 엔터프라이즈급 보안 기능을 사용하여 보안 로그인, 세션 관리, 개인 정보 보호 규정 준수 등 가상 현실에서 회의 및 작업 모임을 가질 수 있습니다.
Azure 스마트 클라우드는 Meah 에게 많은 모델 장면과 캐릭터를 수용하기 위한 사전 요구 사항을 제공합니다. 이는 플랫폼과 기존 APP 의 차이점이기도 합니다. XR 환경에서 응용 프로그램 간의 셔틀은 도시 간 여행과 더 비슷하며, 다운로드 과정이나 하드웨어 컴퓨팅 능력 적응 문제가 없다는 것을 알 수 있습니다. 실제로 2020 년 말부터 주요 업체들은 클라우드 서비스 기반 플랫폼 서비스 전략을 전면적으로 시행하기 시작했습니다. 이 가운데 Epic 의 디지털 인간 플랫폼과 HTC 의 VR 소셜 플랫폼은 이미 클라우드 기술을 포용하고 있다. 클라우드 컴퓨팅의 힘과 자원은 모든 일반 소비자에게 분배되어 보다 안전하고 가격 대비 성능이 뛰어난 XR 경험을 얻을 수 있습니다. 이는 XR 업계의 보급의 서광이기도 합니다.
Microsoft 는 XR 레이아웃에 노력을 아끼지 않았습니다. 기술 이사 알렉스 킵만 (Alex Kipman) 이 갑자기' 바다 깊은 곳' 에서' 번쩍이는' 것처럼 시적이고 로맨틱한 낭송을 시작했습니다. 한 사람의 꿈은 꿈일 뿐, 모든 사람이 함께 꿈꾸는 꿈은 현실이라고 합니다. (데이비드 아셀, Northern Exposure (미국 TV 드라마), 예술명언) 모바일 인터넷 기회를 놓친 Microsoft 는 MR 분야에서 클라우드 컴퓨팅의 장점을 결합하여 미래에 더 가까이 다가갈 수 있도록 하고 있습니다. 그물망은 결코 금상첨화가 아니다. 이러한 장점을 유지한다면 XR 기반 개발 시스템 및 클라우드 컴퓨팅 지원을 갖춘 Microsoft 는 XR 의 향후 기준 중 일부를 정의할 것입니다.