애플이 AR 혁명을 주도하고 있는가? Unity Technology Open Day x Rokid, 차세대 인간-컴퓨터 상호작용의 새로운 경로에 대해 이야기합니다.

AR 개발의 이정표는 Apple이 촉발한 공간 컴퓨팅 시대의 혁명에 새겨져 있습니다. Vision Pro가 만들어낸 몰입형 공간은 사용자에게 새로운 인간-컴퓨터 상호 작용 경험을 선사합니다. 예를 들어 사용자는 앱을 탐색할 때 손가락을 모아서 선택할 수 있습니다. 공중 아무 곳이나 클릭하세요.

실제로 사람, 현실 세계, 가상 세계를 보다 자연스럽고 실제적인 방식으로 통합하는 것은 Rokid가 탐구해 온 방향이기도 합니다.

올해 3월 로키드 오픈데이에서 로키드는 자체 개발한 차세대 AR 공간 운영체제인 요다OS-마스터(YodaOS-Master)를 출시했다. 로키드 맥스 프로(Rokid Max Pro) 안경을 기반으로 손바닥을 펼치면 메뉴가 바로 눈앞에 나타난다. . 아이콘을 클릭해 애플리케이션에 들어가 유연하고 유연한 공간 멀티스크린 인터랙티브 경험을 즐겨보세요. 그중에서도 단일 카메라를 기반으로 SLAM, 3D 맨손 인터랙션 등의 기능을 업계 최초로 구현한 새로운 기술 루트로, 출시 이후 업계의 관심과 뜨거운 논의가 이어지고 있다.

오늘 중국 개발자들에게 가장 중요한 연례 행사 중 하나인 '2023 Unity Technology Open Day'가 베이징에서 처음으로 개최되었습니다. 회의에서 Rokid 시스템 R&D 수석 엔지니어인 Shi Wenfeng은 "Rokid YodaOS-마스터 시스템 소개 및 애플리케이션 개발 및 구현"이라는 제목으로 연설하면서 매우 기대되는 기술 경로와 Rokid의 최신 기술 개발 및 사이트 개발 연구자들은 심도 있는 교류와 토론을 가졌습니다.

로키드가 자체 개발한 차세대 우주 AR 시스템

업계 최초 단일 카메라 SLAM 기술

오늘 게임 포럼에서는 Rokid 시스템 연구 개발 수석 엔지니어인 Shi Wenfeng이 다년간의 AR 산업 기술 연구 개발 경험과 결합하여 많은 기대를 모았던 YodaOS-Master 시스템을 현장 개발자들에게도 소개했습니다. Rokid의 기술적 사고 방식입니다.

YodaOS-Master는 인식, 이해, 상호 작용, 프리젠테이션, 협업 및 디지털 생성의 5가지 측면을 중심으로 칩 최적화, 하드웨어 설계, 소프트웨어 아키텍처, AR 알고리즘 및 생성 도구와 같은 여러 측면에서 대폭적인 업그레이드를 진행했습니다. AR 시대를 위한 가장 발전된 우주 운영체제의 완전한 세트입니다.

Rokid Max Pro 안경을 기반으로 단일 카메라를 기반으로 SLAM, 3D 맨손 상호 작용, 1인칭 시점 공유, 시각적 위치 확인 VPS 및 기타 기능을 최초로 구현합니다. 멀티 태스킹, 공간 생성 및 기타 기능을 지원할 수 있습니다. 더욱 가볍고 보편적인 다양한 AR 경험을 선사하는 Hui의 AR 안경은 무한한 가능성을 선사합니다.

YodaOS 운영 체제 탄생 초기에 Rokid는 개발자가 YodaOS 운영 체제를 통해 상상력을 발휘하고 가치를 창출할 수 있도록 지원하는 관점을 고수해 왔습니다.

Shi Wenfeng은 "YodaOS-Master 운영 체제는 Rokid 음성 인식, 제스처 인식, SLAM 등 여러 핵심 기술을 '패키지'하는 모듈식 접근 방식을 사용하여 개발자가 효율적으로 개발할 수 있는 SDK를 구성합니다. Unity를 통해 Unity 개발자는 Rokid 핵심 기술을 개발에 빠르게 사용할 수 있습니다.”

Rokid는 항상 보다 자연스러운 AR 상호작용 경험을 위해 노력해 왔습니다. 기존의 2D 제스처 인식에 비해 3D 제스처 인식은 더 어렵습니다. Wenfeng 선생님은 현재 Rokid에서 사용하고 있는 YodaOS-Master의 기본 시스템 기능을 기반으로 하는 단안 3D 동작 인식 기술에 중점을 두었습니다.

로키드가 자체 개발한 단안 3D 제스처 알고리즘은 딥러닝 알고리즘과 대량의 실험 데이터를 기반으로 손 6DoF, 손 관절점 26DoF, Hand Mesh 정보 등 손 자세 매개변수를 모바일 단말기에서 실시간으로 재구성할 수 있습니다. AR 제스처 상호작용은 좋은 알고리즘 기반을 제공합니다.

현재 Rokid의 제스처 인식은 3D 공간에서 포인트, 핀치, 잡기, 홀드, 드래그, 당기기 등 다양한 작업을 실현할 수 있어 AR 인터랙티브 애플리케이션의 요구 사항을 완벽하게 충족할 수 있습니다. Rokid Max Pro의 경우 헤드셋을 착용하고 손을 뻗으면 손바닥 앞에 메뉴가 나타납니다.

소프트웨어와 하드웨어를 통합한 로키드의 AR 공간 체험은 국내 최초 AR 안경을 기반으로 한 위안버스 블록 프로젝트-항저우 원삼위안 유니버스 AR 디지털 라이프 블록, 국가 문화 블록 여행 등 전국 여러 장면에서 구현됐다는 점을 언급할 가치가 있다. 업계 최초 단안 시각 기반 AR 안경 내비게이션 솔루션 SLAM - 둔황 AR 스마트 가이드, 딩톡(DingTalk)과 로키드(Rokid)가 만든 국내 최초 기업용 AR 디지털 전시장 등

루오치 디지털휴먼+AIGC

다중 모드 인터랙티브 경험의 새로운 업그레이드

AI 시대의 가속화된 발전과 함께 인간-컴퓨터 상호작용의 발전 추세는 다중 모드 상호작용입니다. 미래에는 더 깊은 요구에 대한 사람들의 만족이 단일 키보드 상호 작용, 터치 상호 작용, 음성 상호 작용 및 기타 방법에만 국한되지 않을 것입니다.

일하면서 음악을 듣고 싶다면 먼저 음성이나 터치 상호작용을 통해 스피커를 깨운 다음 ​​키보드 상호작용을 통해 사무실 소프트웨어를 열어야 한다고 상상해 보세요. 디지털 인공 비서가 있으면 두 작업을 동시에 완료하려면 명령 하나만 내리면 모든 것이 더 쉬워집니다.

이 역시 로키드가 AI 디지털 휴먼인 이유 중 하나입니다. Shi Wenfeng은 AI 디지털 휴먼 기술이 음성 비서 AI 디지털 휴먼, SLAM, 3D 제스처, 6DOF 공간 오디오 및 기타 Rokid 핵심 기술을 포함하여 시스템의 모든 기능을 연결하여 사용자에게 더욱 풍부한 인간-컴퓨터 상호 작용 경험을 제공할 수 있다고 말했습니다.

현재 Rokid가 만든 디지털 인간 "Ruoqi"는 AIGC에 완전히 연결되어 있습니다. 사용자는 언제든지 "Ruoqi"를 소환하고 이 가상 비서와 함께 흥미로운 주제에 대해 토론할 수 있습니다.

Shi Wenfeng은 그 뒤에 있는 것이 AIGC 다중 모드 디지털 지능 기반 모델이라고 소개했습니다. ASR, NLP, TTS 등 자체 개발한 알고리즘 기술을 통해 "Ruoqi"를 구동하여 정확한 표정, 음성 표현, 신체를 생성합니다. 움직임과 성능이 더욱 현실적이고 자연스러우며 부드럽습니다.

Rokid는 모든 측면에서 개발자의 역량을 강화합니다

인간-컴퓨터 상호작용의 다음 시대를 함께 맞이합시다

향후 AR, MR 및 기타 기술이 점점 성숙해짐에 따라 영화 감상, 게임, 사무, 교육 등 다양한 시나리오에서 혁신을 위한 무한한 공간이 생길 것입니다. 다양한 생태학적 콘텐츠를 재구성하려면 개발자에게 더 많은 돌파구와 혁신이 시급히 필요합니다.

Unity Technology Open Day는 중국 개발자를 위한 가장 중요한 연례 인터랙티브 축제 중 하나입니다. 매년 여러 번의 오프라인 투어를 통해 창작자 그룹을 위한 기술 교류 플랫폼을 구축하고 기술 진화의 길을 전달하며 다양하고 활동적인 개발자를 만들어냅니다. 커뮤니티 분위기를 조성하고 개발자의 목소리에 귀를 기울이면서 실시간 3D 기술의 콘텐츠 혁신과 응용 확장을 강화합니다.

로키드는 AR 산업의 선두주자로서 산업 발전에 동참합니다. 이날 행사에서 로키드는 최신 기술 공유 연설을 선보일 뿐만 아니라 현장에 부스 공간도 마련해 현장 개발자들이 로키드의 최신 AR 제품과 생태학적 건설 시나리오를 경험할 수 있도록 함으로써 로키드를 더욱 직관적으로 이해할 수 있도록 돕습니다. 최신 기술과 생태.

최근 몇 년간 Rokid는 전용 AR 개방형 플랫폼(ar.rokid.com) 구축, "Ruoqi 우주 정거장" 개발자 지원 프로그램 출시, 글로벌 AR 애플리케이션 개발 대회 개최 등 더 많은 개발자의 역량을 강화하는 데 전념해 왔습니다. 개발자들이 생태학적 공동 건설에 참여하도록 장려하고 AR 생태계의 번영을 촉진합니다.

Wenfeng은 개발자를 위한 Rokid의 'Ruoqi 우주 정거장' 개발자 지원 프로그램이 하드웨어 장비, 알고리즘 기능, 개발 지원 및 마케팅 프로모션 측면에서 개발자에게 포괄적인 지원을 제공한다고 소개했습니다. 동시에 Rokid는 업계를 선도하는 여러 기업 및 VC와 협력하여 뛰어난 개발자에게 직접 투자하기 위해 10억 위안 규모의 생태학적 지능형 투자 동맹을 구축했습니다.

로키드는 개발자들에게 전폭적인 지원을 제공했을 뿐만 아니라, 제1회 글로벌 AR 애플리케이션 개발 대회를 성공적으로 개최해 글로벌 개발자들에게 11개의 중요한 상을 수여했습니다. Rokid는 전국 대학의 혁신력을 자극하기 위해 올해 5월 제1회 대학 XR 콘텐츠 제작 대회를 공식적으로 시작했습니다.

앞으로 Rokid는 AR 생태계 구축에 참여하고, 개방적이고 상생하는 생태계를 조성하고, 업계에 지속적으로 힘을 실어주고, AR 산업의 가속화된 발전을 촉진하고, 공동으로 포용하기 위해 더 많은 파트너와 손을 잡을 의향이 있습니다. 인간-컴퓨터 상호작용의 다음 시대.

위 내용은 애플이 AR 혁명을 주도하고 있는가? Unity Technology Open Day x Rokid, 차세대 인간-컴퓨터 상호작용의 새로운 경로에 대해 이야기합니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!