Apple Vision Pro는 사용자 상태 감지를 위해 수많은 AI 기술을 결합합니다.

Vision Pro에 참여한 전직 Apple AR 엔지니어인 Sterling Crispin이 Apple에 재직하면서 했던 작업을 공유하는 글을 올렸습니다. Apple Vision Pro에는 AI 모델을 활용해 시사 문제에 관심이 있는지, 주의가 산만해지는지 등 몸과 뇌의 상태를 예측하는 등 머신러닝 기술이 대거 탑재됐다고 한다. .

이 모든 것은 사용자의 안구 운동 데이터, 심박수, 근육 활동, 혈압, 뇌 혈액 밀도 및 기타 데이터를 기반으로 측정되고 판단됩니다.

Apple의 Vision Pro 프로젝트 팀장인 Mike Rockwell도 다음과 같이 말했습니다. 시선 방향은 매우 민감한 개인 정보 보호 데이터입니다. Apple은 또한 Vision Pro에서 개인 정보 보호 기능을 구현했습니다. "클릭"하면 "그 후 앱은 사용자의 조작 동작을 얻을 수 있지만 시선의 방향은 얻을 수 없습니다.

Apple Vision Pro 개인정보 보호

다음은 Sterling Crispin의 원문입니다:

Apple에서 기술 개발 그룹의 Neurotech 프로토타이핑 펠로우로 근무할 때 저는 #VisionPro 개발에 내 시간의 10%를 투자했습니다. 이것은 내가 해본 것 중 가장 오랜 노력이었습니다. 드디어 발표가 되어서 자랑스럽고 안도감이 듭니다. 저는 10년 동안 AR과 VR 분야에서 일해왔는데, 여러 면에서 이는 단일 제품으로 전체 산업의 정점을 이루는 것입니다. 제가 도움을 준 것에 대해 감사드리며, 이 공간에 참여하고 싶거나 전략을 개선하고 싶다면 언제든지 상담하고 전화를 받을 수 있습니다.

제가 하는 작업은 Vision Pro의 기초 개발, 마음챙김 경험, ▇▇▇▇▇▇제품 및 보다 야심찬 신경기술 문샷 연구를 지원합니다. 예를 들어, 무언가를 클릭하기 전에 클릭할 것이라고 예측하는 것은 기본적으로 마음을 읽는 것입니다. 그곳에서 3년 반 동안 일하고 2021년 말에 떠났기 때문에 지난 2년 동안 모든 것이 어떻게 이루어졌는지 경험하게 되어 기쁩니다. 편집에 어떤 내용이 들어갔는지, 나중에 어떤 내용이 공개될지 정말 궁금합니다.

특히 Vision Pro ▇▇▇▇▇▇ 프로그램의 원래 비전, 전략 및 방향에 기여한 것을 자랑스럽게 생각합니다. 제가 소규모 팀에서 수행한 작업은 이 제품 범주에 대한 승인을 제공하는 데 도움이 되었으며, 언젠가는 이것이 전 세계적으로 상당한 영향을 미칠 수 있다고 생각합니다.

제가 Apple에서 수행한 대부분의 작업은 NDA에 따라 이루어졌으며 광범위한 주제와 접근 방식을 포괄했습니다. 하지만 아래에 인용하고 설명할 수 있는 몇 가지 사항이 특허를 통해 공개되었습니다.

일반적으로 제가 하는 작업의 대부분은 몰입형 경험 중에 신체와 뇌의 데이터를 기반으로 사용자의 정신 상태를 감지하는 것과 관련됩니다.

그래서 사용자는 혼합 현실 또는 가상 현실 경험에 있습니다. AI 모델은 사용자가 호기심이 있는지, 주의가 산만해졌는지, 겁이 났는지, 집중했는지, 과거 경험을 회상하는지 또는 기타 인지 상태를 예측하려고 합니다 . 이는 시선 추적, 뇌 전기 활동, 심장 박동 및 리듬, 근육 활동, 뇌 혈액 밀도, 혈압, 피부 전도도 등과 같은 측정을 통해 추론할 수 있습니다.

특정 예측을 가능하게 하는 데에는 제가 언급한 몇 가지 특허에 자세히 설명되어 있는 많은 트릭이 있습니다. 가장 멋진 결과 중 하나는 사용자가 실제로 클릭하기 전에 무언가를 클릭할 것이라고 예측하는 것입니다. 그것은 힘든 일이고 제가 자랑스러워하는 일입니다. 클릭하기 전에 학생들이 반응하는 이유 중 하나는 클릭한 후에 어떤 일이 일어날 것이라고 예상하기 때문입니다. 따라서 사용자의 눈 동작을 모니터링하고 실시간으로 UI를 재설계하여 예상되는 동공 반응을 더 많이 생성함으로써 사용자 두뇌의 바이오피드백을 생성할 수 있습니다. 그것은 눈을 통한 조잡한 두뇌-컴퓨터 인터페이스이지만 꽤 멋지다. 그리고 나는 언제든지 침습적인 뇌 수술을 받을 것입니다.

인지 상태를 추론하는 다른 기술로는 사용자가 인식할 수 없는 방식으로 빠르게 시각적 또는 소리를 깜박인 다음 이에 대한 반응을 측정하는 것이 있습니다.

또 다른 특허에서는 기계 학습과 신체 및 뇌의 신호를 사용하여 집중력, 휴식 또는 학습을 예측하는 방법을 자세히 설명합니다. 그런 다음 가상 환경이 업데이트되어 이러한 상태가 향상됩니다. 따라서 배경에서 보고 듣는 내용을 변경하여 공부하고, 일하고, 휴식을 취하는 데 도움이 되는 적응형 몰입형 환경을 상상해 보세요.

이러한 모든 세부 사항은 특허에 공개되어 있으며 어떠한 내용도 공개되지 않도록 신중하게 작성되었습니다. 나는 다른 많은 일에 참여하고 있으며 결국에는 더 많은 것을 볼 수 있기를 바랍니다.

많은 분들이 오랫동안 이 제품을 기다려 주셨습니다. 하지만 VR로 가는 길은 아직 한 걸음 남았습니다. 업계는 10년이 끝날 때까지 기술의 원대한 비전을 완전히 따라잡지 못할 것입니다.

다시 한 번 말씀드리지만, 귀하의 비즈니스가 이 분야에 진출하거나 전략을 개선하려는 경우, 저는 컨설팅 업무와 전화를 받을 준비가 되어 있습니다. 대부분 저는 이것이 마침내 발표되었다는 사실이 자랑스럽고 안도감을 느낍니다. 이 작업을 시작한 지 5년이 넘었고, 다른 디자이너나 엔지니어들과 마찬가지로 제가 대부분의 시간을 보내는 곳이 바로 이 곳입니다. 전체가 부분의 합보다 더 크길 바라며 Vision Pro가 여러분의 마음을 사로잡을 것입니다.

출처: 스털링 크리스핀

위 내용은 Apple Vision Pro는 사용자 상태 감지를 위해 수많은 AI 기술을 결합합니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!