Gali ratusan paten AR/VR dan terokai semua aspek Apple XR

Kami juga telah melihat banyak berita Apple XR baru-baru ini Daripada melihat pelbagai pendedahan, adalah lebih baik untuk memulakan dengan paten dan melihat cara berbeza yang mungkin dimainkan oleh set kepala Apple XR. Oleh itu, kami memilih daripada ratusan paten AR/VR Apple dalam beberapa tahun kebelakangan ini dan menyusun paten yang boleh menentukan dan menjejaskan pengalaman produk XR secara langsung. Sudah tentu, paten ini tidak akan tertumpu pada satu produk, dan kami tidak dapat memberitahu anda dengan tepat rupa Apple XR, tetapi kami masih boleh melihatnya melalui paten.

Apabila menyusun paten AR/VR Apple dalam beberapa tahun kebelakangan ini, kami terutamanya menemui ciri berikut:

1) Sesetengah paten AR/VR datang daripada syarikat yang diperoleh sebelum ini, seperti PrimeSense, Metaio, NextVR, SMI, Spaces, dsb.

2) Cahaya berstruktur, julat LiDAR, perspektif VST, tombol digital, zum dinamik, dsb. adalah tumpuan inovasi Apple;

3) Terokai pelbagai penyelesaian optik yang berbeza, pandu gelombang cahaya pembelauan, unjuran retina, dsb.

4) Beberapa paten kemudiannya menerangkan penyelesaian paparan AR/VR berbilang kanta, yang dijangka akan digunakan bersama dengan susunan kamera VST set kepala.

Jadual Kandungan

1. Paparan optik
2. Penjejakan mata
3. Biosensor
4. Teknologi interaktif
Lima, perspektif VST
Enam, audio spatial
Tujuh, sistem kedudukan
Lapan, penderia lain
Sembilan, reka bentuk penampilan
10, reka bentuk UX
Sebelas, senario aplikasi

1. Paparan optik

◎ Penyelesaian pengimbasan mikrocermin LBS + pandu gelombang optik difraksi: No. US20190377181A1, dsb.

Terdapat banyak reka bentuk laluan cahaya yang berbeza, malah mungkin untuk memasukkan polarizer reflektif antara grating fasa dan pandu gelombang Cirinya ialah pancaran cahaya boleh ditukar untuk menukar polarisasi relatif cahaya yang dipantulkan dan difraksi. ringan.

◎ Imbasan retina: No Apple menerangkan sistem unjuran retina AR/VR Prinsipnya adalah menggunakan mikromirror untuk mengimbas piksel satu demi satu ke retina pengguna Kelebihannya ialah ia menyokong zum dinamik, dan objek serta permukaan dalam imej AR/VR boleh dipaparkan dalam arah visual yang betul Dipaparkan secara mendalam.

◎ Pandu Gelombang Lensa Boleh Ditala

Pada tahun 2018, Apple meneroka penyelesaian paparan AR/VR berdasarkan pandu gelombang optik LCoS+ Enjin optik terletak di sebelah kiri dan kanan bingkai cermin mata, menyuntik imej ke dalam pandu gelombang optik di hadapan mata pengguna. Di samping itu, penyelesaian ini mempunyai kanta fokus boleh laras.

Dalam paten lain (US11221488B1), Apple menyatakan bahawa kanta fokus boleh menggunakan satu atau lebih kanta kristal cecair, atau kanta berisi bendalir, atau kanta Alvarez, yang dicirikan dengan menyokong pelarasan penglihatan dan mengurangkan rabun, hiperopia , dan lain-lain soalan.

◎ Pandu gelombang optik holografik + LED Mikro

No. US20180321432A1 Dalam paten, Apple menerangkan penyelesaian pandu gelombang optik digabungkan dengan filem optik holografik, menggunakan sumber cahaya LED Mikro. persepsi visual dimensi.

Sebagai tambahan kepada pandu gelombang optik holografik, Apple menyebut penyelesaian optik AR berdasarkan penggabung holografik reflektif dengan sifat separa reflektif dan separa lutsinar dalam paten 2019 yang lain (No. US20190285897A1).

◎ Sistem optik katadioptrik

No. US20190146198A1 menunjukkan skema katadioptrik untuk sistem penyambungan AR/VR yang sukar dipelajari Ia dicirikan dengan terdiri daripada kanta pemancar tinggi berbilang lapisan (diperbuat daripada kaca atau plastik), yang mungkin termasuk plano- cermin cembung dan cermin plano-cekung. Tujuan mengguna pakai reka bentuk laluan optik lipat adalah untuk mengurangkan ketebalan modul optik yang dipasang di kepala.

◎ Kanta pelarasan bendalir

Nombor paten US20200096770A1 menunjukkan set kanta AR/VR boleh laras secara dinamik, yang dicirikan dengan menambahkan interlayer bendalir antara kanta untuk mencapai fokus dinamik dan kesan pelarasan diopter. Lapisan cecair dikawal oleh pam mekanikal elektronik Semakin banyak cecair di antara kanta, semakin jauh jaraknya Oleh kerana modul optik mata kiri dan kanan adalah bebas, jarak fokus mata kiri dan kanan boleh dikawal secara bebas.

◎ Paparan Lentikular

Dalam nombor paten US20200103669A1, US20210072556A1, US11143865B1, US11187914B2, US20220035160A1, US20220072556A1 dan penyelesaian optik berbilang lens bentuk arka) disebut lebih kecil daripada kanta apertur tunggal nipis, yang membantu mengurangkan saiz paparan kepala, dan mempunyai FOV yang besar, menyokong pensuisan sudut tontonan dinamik, dan disesuaikan dengan modul perspektif VST tatasusunan berbilang kamera.

Selain itu, ia juga menerangkan secara terperinci kaedah pengoptimuman penyelesaian optik, seperti menggunakan filem louver untuk mengawal sudut pancaran cahaya skrin paparan untuk mengurangkan crosstalk, atau menambah pemantul untuk menukar sudut perspektif dan membawa perspektif pemandangan "secara visual lebih dekat" kepada pengguna ” untuk menunjukkan kedalaman/jarak pemandangan yang lebih tepat.

◎ Penyelesaian kanta fasa geometri pelbagai lapisan

Dalam nombor paten US20210048674A1, Apple mencadangkan penyelesaian optik untuk memaparkan gambar gabungan maya dan nyata tiga dimensi Ia dicirikan dengan menggunakan struktur kanta berbilang lapisan untuk memaparkan objek berbeza dalam satah fokus yang berbeza dan menyambungkannya ke dalam satu. pemandangan tiga dimensi yang mengasyikkan. Melaksanakan penyelesaian ini memerlukan perhatian yang tinggi terhadap keperluan dalam optik, penjejakan mata, algoritma perisian, dll., untuk berjaya mensimulasikan kesan zum dinamik mata manusia.

◎ Kanta menukar warna

Dalam paten 2019 (US11029521B2), Apple mencadangkan penyelesaian kanta AR dengan lapisan fotokromik yang ditindih, yang dicirikan dengan mengurangkan ketransmisian di bawah cahaya ultraungu yang kuat, menjadikan imej AR lebih kelihatan di luar Paparan dengan jelas. Sama seperti cermin mata biasa yang menukar warna, mekanisme ini boleh menggantikan beberapa cermin mata AR yang menggunakan tudung.

◎ Penyelesaian optik pampasan serakan: No. US20200117003A1

Penyelesaian ini bertujuan untuk meningkatkan kecekapan optik dan kualiti imej optik dekat mata seperti AR Ia dicirikan dengan menggunakan pelbagai bahan holografik sebagai media parut Setiap bahan holografik mempunyai vektor parut, frekuensi dan arah, jadi ia boleh dihapuskan dengan baik Perbezaan warna. Penyelesaian ini boleh digabungkan dengan polarizer dan komponen unjuran untuk membentuk penyelesaian optik.

◎ Tingkatkan kualiti skrin LED Mikro

Untuk mengawal kualiti pengeluaran skrin LED Mikro dengan lebih baik, Apple telah mereka bentuk peralatan dan seni bina ujian khas, mendakwa ia boleh menangkap piksel LED yang tidak memenuhi standard kecerahan sebelum Micro OLED diikat pada panel (seperti seperti menggunakan pengimbasan optik paparan ), LED ganti boleh diganti terus selepas masalah ditemui, untuk membaikinya dengan lebih berkesan.

LED mikro ialah teknologi paparan yang agak canggih Selain digunakan dalam telefon bimbit dan jam tangan pintar, ia juga dijangka akan digunakan dalam set kepala AR/VR pada masa hadapan.

◎ Perspektif 360°

Dalam nombor paten US20210092292A1, Apple menerangkan penyelesaian paparan dipasang pada kepala AR/VR yang dilengkapi dengan 8 kamera Cirinya ialah 8 kamera disusun di sekeliling paparan yang dipasang di kepala (termasuk penutup hadapan dan ikat kepala) untuk menangkap dan melihat. melalui persekitaran 360° sekeliling, dengan itu meningkatkan persepsi alam sekitar pengguna dan dapat melihat walaupun dalam bintik buta.

◎ Skrin utama + reka bentuk skrin sekunder

Dalam paten yang diterbitkan pada tahun 2021, Apple mereka bentuk penyelesaian cermin mata AR berdasarkan skrin utama + skrin kedua Cirinya ialah skrin utama dan kedua boleh beroperasi secara bebas, dan skrin utama mempunyai resolusi yang lebih tinggi dan digunakan untuk. memaparkan fungsi AR utama, dan skrin sekunder mempunyai resolusi yang lebih rendah dan terutamanya memaparkan beberapa maklumat segera yang mudah, seperti kira detik, peristiwa, dll., dan terdapat bulatan penunjuk LED di pinggir paling luar bingkai untuk mengingatkan bahawa AirTag terletak berhampiran. Kelebihan reka bentuk ini ialah menggunakan kawasan skrin terhad dengan lebih rasional sambil mengurangkan kuasa pengkomputeran dan penggunaan kuasa.

Dalam paten bernombor US11450297B1, Apple mereka bentuk skema pemaparan berfoveated dengan satu skrin utama dan dua skrin sekunder ini (boleh menggunakan panel fleksibel atau tegar) disusun dalam lengkok yang sesuai dengan lengkungan kepala untuk menyembunyikan sempadan skrin, Apple menambah lapisan bebas struktur resapan pada kanta untuk mengoptimumkan sambungan antara skrin resolusi tinggi dan resolusi rendah.

2. Penjejakan mata

Teknologi penjejakan mata ialah perkara utama yang disebut berulang kali dalam paten AR/VR Apple Kegunaan utamanya termasuk: pemaparan foveation, pengurangan penggunaan kuasa, pemfokusan dinamik, pemantauan biologi, pengesanan penglihatan, input pandangan, dsb. Di samping itu, paten juga menerangkan secara terperinci pelaksanaan dan pengoptimuman penjejakan mata, seperti:

• Penyelesaian inframerah dekat (boleh menangkap pelebaran pupil dan titik pandangan
• Skim berdasarkan denyar retina berarah;
• Penyelesaian pencahayaan sepaksi (sumber cahaya jalur nadi khusus dan penderia imej berada pada paksi yang sama, kelebihannya ialah ia boleh menangkap imej murid yang lebih cerah);
Pampasan kelewatan penjejakan mata dan pengoptimuman kesan.

Berikut ialah beberapa yang lebih tersendiri:

◎ No. US20200019238A1: Saccadic mata manusia adalah fenomena biasa, biasanya beberapa saccades sesaat (succades dalam tempoh yang singkat dari saccades, kepekaan visual juga akan berumur pendek. berkurangan, menyebabkan kebutaan sementara yang tidak mudah dilihat. Ia adalah tepat dengan menggunakan ciri ini bahawa sistem boleh melaraskan kandungan paparan tanpa disedari oleh pengguna, dengan itu mengurangkan penggunaan kuasa dan mengurangkan risiko skrin terbakar.

Penyelesaian ini perlu dilaksanakan dalam kombinasi dengan teknologi penjejakan mata, yang mungkin menggunakan penyelesaian penderia CV atau IR.

◎No. US20190339770A1: Paten menerangkan penyelesaian AR/VR zum mekanikal berdasarkan penjejakan pandangan, yang boleh menukar fokus gambar apabila pandangan pengguna berubah. Untuk mengimbangi kelewatan sistem zum, paten memfokuskan pada menerangkan teknologi ramalan titik pandangan yang boleh meramalkan trajektori pergerakan mata manusia (titik pendaratan imbasan bola mata) terlebih dahulu dan pra-memaparkan imej kelebihannya ialah ia boleh membuat penukaran fokus lebih lancar.

Pada 2018, Apple memohon paten untuk skim pemaparan berfoveated yang boleh mencapai resolusi 8K (kawasan visual tengah). Pada 2019, terdapat juga paten Apple yang menyebut penyelesaian pemaparan berfoveated (masing-masing bernombor US20190172399A1, US20190180672A1), yang dicirikan oleh penggunaan dua skrin (skrin utama definisi tinggi + skrin sekunder definisi rendah. Resolusi dijangka mencapai 8K). , dan skrin ppi Antara 1000 dan 2000.

◎ No. US20190133440A1: menunjukkan penyelesaian untuk menambah baik dan mengoptimumkan ketepatan dan kestabilan pengesanan mata dengan mengenal pasti mata yang dominan. Mata dominan juga dipanggil mata dominan Pemfokusan pada menganalisis data mata dominan dalam penjejakan mata boleh menjajarkan paksi optik dan paksi visual bola mata dengan lebih baik, menghasilkan keputusan penentukuran yang lebih baik dan lebih cepat.

Faedah lain mengenal pasti mata dominan ialah ia dapat membantu pengguna mendiagnosis penyakit mata yang berkaitan dengan vergence, seperti strabismus atau amblyopia, dan mengoptimumkan teknologi pemaparan titik penetapan atas dasar ini. Untuk mengoptimumkan lagi kebolehsesuaian penjejakan mata kepada pelbagai orang, Apple menyebut dalam nombor paten US11644896B2 bahawa sistem penjejakan mata boleh mengekstrak ciri mata pengguna yang berbeza sebagai parameter kawalan, dan menentukur titik pandangan secara dinamik berdasarkan ini. .

◎ Tidak. WO2020068447: Apple telah mencadangkan cara untuk membuka aplikasi AR/VR berdasarkan penjejakan mata. Cirinya ialah ia digabungkan dengan permainan suara logo aplikasi dan sebut "buka" Anda boleh membuka aplikasi dan kawalannya adalah semula jadi dan pantas. Dalam paten lain yang diterbitkan pada 2021, Apple turut mencadangkan penyelesaian untuk menukar kotak input teks dengan cepat menggunakan titik pandangan, membolehkan anda mengisi borang dan memasukkan maklumat peribadi dengan lebih pantas dalam VR.

Menurut Apple, penjejakan mata juga boleh mengoptimumkan rakaman video orang pertama secara dinamik, seperti menggunakan titik pandangan untuk memacu kedudukan penangkapan kamera, meletakkan perhatian pengguna di tengah-tengah video dan menggerakkan kamera dengan pantas mengikut perubahan dalam titik pandangan (menggunakan algoritma pelicinan untuk anti-goncang). Ini akan sangat sesuai untuk cermin mata AR semua cuaca pada masa hadapan.

◎ No. US20200278539A1: Untuk menjimatkan penggunaan kuasa perkakasan penjejakan mata, Apple mereka bentuk penyelesaian berasaskan kamera acara dalam paten, yang dicirikan dengan hanya menghidupkan apabila pergerakan mata dikenali. , bukannya berterusan Mula mengimbas. Satu lagi ciri paten ini ialah ia boleh melaraskan keamatan cahaya berdasarkan maklumat biologi pengguna Apabila pengguna berkelip beberapa kali tidak normal atau mengenali pengguna kanak-kanak, algoritma sistem akan mengurangkan kecerahan sumber pencahayaan untuk meningkatkan keselesaan visual. .

Satu lagi penyelesaian penjimatan kuasa ialah menggabungkan mod penjejakan mata resolusi rendah dan resolusi tinggi untuk mengenal pasti pergerakan relatif dan kedudukan tepat bola mata masing-masing, dan menggabungkannya dengan penderia kepala untuk mencari titik pandangan.

◎ No. US10354136B2: Untuk meningkatkan ketepatan penjejakan mata, mengurangkan drift adalah kunci. Dalam paten ini, Apple memperkenalkan sistem kanta khas yang didakwa boleh mengurangkan drift pengesanan mata. Penyelesaiannya adalah berdasarkan pengesanan sinar, yang boleh memodelkan bola mata dan banyak lagi dengan mengenal pasti data cahaya yang sampai ke mata manusia dan dipantulkan.

Sesetengah paten penjejakan mata juga datang daripada syarikat SMI (Senso Motoric) yang diperoleh oleh Apple pada tahun 2017, seperti US10437327B2, yang mencadangkan penyelesaian untuk menangkap titik pandangan melalui pengimejan kedua. Ia digunakan untuk mengesan kedudukan murid, manakala pengimejan kedua mempunyai resolusi yang lebih rendah dan digunakan untuk mengenal pasti bola mata yang terang Selepas dua data tangkapan digabungkan, data ramalan titik pandangan boleh menjadi lebih tepat.

3. Biosensor

Dalam sesetengah paten, Apple mencadangkan menambah biosensor pada set kepala AR/VR untuk mengesan status fizikal pemakai dan menukar kandungan yang dipaparkan dengan sewajarnya. Dari segi butiran, set kepala boleh mengecam maklumat seperti kekuatan, suhu, kelembapan, anjakan, EEG, kapasitansi, EMG dan kadar denyutan jantung untuk menilai tekanan psikologi dan status kesihatan peribadi, dan kemudian mengesyorkan aplikasi atau kandungan untuk membantu berehat dalam AR/VR , dan juga Boleh meminta maklumat perubatan secara proaktif.

Dalam paten 2019, Apple menerangkan penyelesaian penjejakan muka, yang menampilkan pelbagai biosensor dalam set kepala dan cermin mata AR/VR, seperti PPG (photoplethysmography) dan ECG (Electrocardiogram), GSR (Electrical Skin Signal), Pressure Penderia, eField, Penderia Terma dan banyak lagi. Peranti ini boleh mengesan status kesihatan pengguna dengan menganalisis pelbagai pergerakan muka yang kompleks seperti mengunyah, berkedip dan hidung berkedut.

4. Teknologi interaktif

1, gerak isyarat udara

Sesetengah teknologi gerak isyarat 3D Apple berasal daripada PrimeSense, yang diperolehnya pada tahun 2013. Ia boleh didapati daripada beberapa paten berkaitan bahawa pencipta ialah bekas pekerja PrimeSense. Sebagai contoh, dalam paten, penyelesaian gerak isyarat 3D diperkenalkan, yang membolehkan pengguna menggunakan genggam, tolak, lepas dan gerak isyarat lain untuk mengendalikan antara muka pengguna 3D untuk bermain permainan atau bermain video.

Gerak isyarat udara ialah teknologi biasa dan penting dalam paten AR/VR Apple Ia bukan sahaja boleh digunakan dalam set kepala AR/VR, tetapi juga boleh dilaksanakan pada iPhone, iPad, Mac dan peranti lain.

Sistem gerak isyarat udara Apple boleh menggunakan pelbagai penyelesaian, seperti cahaya berstruktur, LiDAR, RGB, penderia IR, transduser ultrasonik, penderia VSWR, dsb.

Sebagai contoh, dalam nombor paten US20210011289A1, Apple menerangkan penyelesaian paparan dipasang pada kepala AR/VR yang menyokong kedudukan Dalam-Keluar Ia dicirikan dengan dilengkapi dengan kamera RGB, penderia ToF dan modul LED IR dan menyokong tangan penjejakan dan julat persekitaran 3D dan banyak fungsi lain.

2, sarung tangan somatosensori/pintar

Apple telah memohon berbilang paten untuk sarung tangan AR/VR, meliputi pelbagai penyelesaian teknikal, seperti menambahkan sensor magnet pada hujung jari sarung tangan untuk mengesan perubahan dan gangguan dalam medan magnet untuk mencari kedudukan relatif antara sumber magnet dan kedudukan sensor untuk mencapai kedudukan gerak isyarat. Tatasusunan sensor daya fleksibel dan bahan konduktor cahaya boleh digunakan untuk mengesan interaksi sentuhan kecil dan perubahan dinamik dalam daya cengkaman.

Selain itu, penyelesaian sarung tangan berdasarkan kedudukan IMU juga dicadangkan. Cirinya ialah sensor IMU dibina di bahagian buku jari sarung tangan, yang boleh mengesan pergerakan dan kedudukan tapak tangan dan jari dengan tepat tanpa bermasalah. oleh faktor seperti oklusi, jadi ia boleh mengenal pasti pergerakan menyilang.

Dalam nombor paten US11397486B2, Apple turut mencadangkan sarung tangan VR yang menggunakan gelombang ultrasonik untuk mengecam gerak isyarat Ia dicirikan oleh keupayaan untuk mengenali tekanan yang dikenakan oleh tapak tangan pengguna dan ketebalan jari.

Selain gerak isyarat menjejak, Apple juga berharap dapat memberikan maklum balas somatosensori sarung tangan AR/VR (No. US10481688B1, US20200257362A1) berdasarkan teknologi seperti rintangan geseran dan tompok fleksibel untuk mensimulasikan "menyentuh" ​​laut, ombak, pokok, pantai , dan roda stereng Perasaan tekstur.

Dalam paten 2020 yang lain, Apple menerangkan penyelesaian sarung tangan yang fleksibel berdasarkan bahan fabrik. Cirinya ialah bahagian fabrik boleh mengembang atau mengecut untuk menyesuaikan diri dengan pengguna dengan bentuk tangan yang berbeza.

3. Gelang/jam tangan pintar

Dalam paten, Apple menerangkan penyelesaian untuk menggunakan jam tangan pintar untuk mengawal permainan VR Ia berdasarkan penderiaan kulit dan boleh membuat kesimpulan pergerakan sendi tangan dengan membandingkan dan menganalisis imej urat.

Dalam paten seperti US20210303068A1, Apple turut mencadangkan penyelesaian untuk mengenal pasti pergerakan sentuhan kedua-dua tangan pada jam tangan pintar melalui CV kamera, UWB, EMG, RF, litar penderiaan, dsb., membolehkan anda menggunakan satu jari untuk menyentuh satu lagi Leret dengan satu tapak tangan untuk mensimulasikan pergerakan kursor, menyeret, membuka atau arahan lain.

Malah, Apple Watch telah melancarkan fungsi pengecaman gerak isyarat (AssistiveTouch) pada tahun 2021, yang boleh mengecam pergerakan seperti membuat penumbuk dan mencubit jari, membolehkan anda mengawal antara muka jam tangan dengan pergerakan mikro satu tangan. Pada masa hadapan, bentuk interaksi ini boleh digabungkan dengan set kepala AR/VR untuk membolehkan interaksi gerak isyarat semula jadi secara langsung.

4, cincin pintar

Pada masa ini, kaedah interaksi utama untuk AR/VR di pasaran adalah pemegang, diikuti dengan gerak isyarat. Syarikat seperti Google, Meta dan Apple sedang mengkaji penggunaan cincin pintar untuk mengawal teknologi AR/VR. Terutamanya dalam paten berkaitan AR/VR Apple (US20190004604A1, US10444834B2, dsb.), selalunya terdapat pengenalan kepada cincin pintar, yang melibatkan pelbagai reka bentuk.

Contohnya: cincin jari berbentuk U (bahan anjal/fleksibel, saiz boleh laras), cincin, katil bayi (menjejaki pergerakan lima jari), atau reka bentuk lingkaran, berengsel dan lain-lain yang bergaya. Ia menampilkan rupa yang boleh dikembangkan dan boleh digunakan dalam berbilang unit atau bekerjasama dengan peranti seperti Apple Pencil.

Ciri termasuk reka bentuk wayarles, kedudukan optik fabrik dan berbilang penderia: pad sentuh, komunikasi NFC, biosensor, sensor tekanan SMI, pin pemecut dan peranti lain, yang boleh mengecam sentuhan/cubitan kulit, ketik dan interaksi gerak isyarat mikro yang lain. , menyokong kedudukan 6DoF, malah boleh mengenal pasti suhu persekitaran, bentuk dan tekstur permukaan fizikal, serta isyarat biologi seperti kadar denyutan jantung, tekanan darah dan oksigen darah. Sesetengah paten juga menyebut bahawa cincin pintar boleh dilengkapi dengan beberapa fungsi pintar yang hampir dengan Apple Watch, seperti tombol digital, membuka kunci komputer Mac, dsb.

5, interaksi stylus

Dalam sesetengah paten, Apple telah mencadangkan penggunaan stylus (seperti Apple Pencil) untuk mencipta objek 3D di angkasa, yang sangat berbeza daripada penyelesaian stylus berasaskan skrin sentuh tradisional.

Sebagai contoh, nombor US20180018057A1 menunjukkan reka bentuk stylus berdasarkan input permukaan bukan elektronik Cirinya ialah stylus mempunyai sensor kedudukan terbina dalam yang boleh mengenal pasti kandungan yang ditulis di mana-mana sahaja.

Dalam paten 2020, Apple menerangkan stylus yang menyokong kedudukan 6DoF Ia dicirikan dengan menyokong maklum balas daya ricih Pengguna boleh merasakan permukaan simulasi, kelantangan, tekstur dalaman, dsb.

Dalam paten lain, Apple turut mencadangkan penyesuai stylus ringkas yang akan membawa kepekaan tekanan pada Pensil Apple (bertindak serupa dengan kekunci pencetus pengawal VR) dan membenarkan pengguna menggunakan Pensil dalam ruang Masukkan maklumat. Selain itu, stylus juga boleh digunakan sebagai pengawal untuk bermain permainan (US20230042447A1), seperti mengetik, menatal, memutar, menjentik dan meluncur dalam AR/VR.

6, papan kekunci maya

No. US10237509B1: Untuk membantu pengguna AR/VR memasukkan teks dengan cepat, Apple mencadangkan reka bentuk papan kekunci maya dalam paten melalui kekunci, papan kekunci maya Vision kelihatan lebih jelas. Dari segi perkakasan input, penyelesaian itu serasi dengan papan kekunci fizikal, papan kekunci skrin sentuh untuk tablet dan sarung tangan penjejakan gerak isyarat.

No. US20200088999A1: Paten ini membayangkan penyelesaian papan kekunci maya berasaskan unjuran Ia dicirikan oleh peranti unjuran pada set kepala, yang boleh menayangkan papan kekunci pada permukaan fizikal seperti desktop dan menggunakan penderia 3D untuk mengenal pasti. pengguna. Tindakan menaip pada papan kekunci. Perlu diingat bahawa set kepala yang disebut dalam paten ini juga menyokong interaksi skrin luaran yang lain, seperti menambah butang, penderia sentuh dan paparan sentuhan pada selongsong, membolehkan pengguna menggunakannya dengan cepat tanpa memakai set kepala.

Dalam paten lain (US10890952B2), Apple turut menyebut penyelesaian unjuran permukaan interaktif yang serupa, yang dicirikan dengan menukar mana-mana permukaan fizikal menjadi menu yang boleh dikendalikan, seperti menindih fungsi kalkulator pada buku nota , atau tindanan UI interaktif pada lengan .

Lima, perspektif VST

Seperti yang dapat dilihat dalam beberapa paten, sebahagian daripada teknologi VST Apple ialah teknologi perspektif yang diperoleh daripada syarikat VRVANA yang mereka peroleh pada 2017. Teknologi VRVANA dicirikan dengan membetulkan herotan imej kanta optik, dan kelewatan perspektif VST hanya beberapa milisaat. Dalam paten yang diterbitkan pada 2019 (salah seorang pencipta ialah pengasas VRVANA Bertrand Nepvue), Apple menerangkan penyelesaian MR berdasarkan prinsip kuncian kroma masa nyata, yang boleh menggantikan latar belakang orang dalam adegan sebenar dengan yang maya. serupa dengan penggantian skrin hijau.

Selain itu, Apple menyatakan dalam paten lain pada tahun 2019 (US10330935B2) bahawa set kepala boleh dilengkapi dengan dua kamera perspektif resolusi tinggi dan resolusi rendah Reka bentuk ini menggunakan teknologi pemaparan titik pandangan VR untuk mengurangkan resolusi Perspektif penglihatan persisian pengguna untuk mengoptimumkan tugas pengkomputeran dan mengurangkan kos perkakasan.

Paten itu juga menunjukkan bahawa set kepala AR/VR merakam persekitaran tiga dimensi di sekeliling melalui dua set kamera RGB, yang mendakwa dapat mensimulasikan sistem visual manusia.

6, audio spatial

Apple juga telah memohon beberapa paten untuk audio spatial, seperti beberapa penyelesaian berdasarkan HRTF (fungsi pemindahan berkaitan kepala), akustik geometri dan teknologi lain, atau mensimulasikan medan bunyi dalaman melalui pengesanan sinar bunyi masa nyata. Di samping itu, kami juga meneroka penyelesaian untuk meramalkan audio dua saluran berdasarkan maklumat kedudukan kepala, yang dicirikan dengan melaraskan jarak simulasi dan arah bunyi secara dinamik berdasarkan pergerakan kepala pengguna untuk meningkatkan pengalaman permainan VR RPG, seram. filem dan kandungan lain.

Dalam US2022032965A1, penyelesaian untuk mencari orientasi pengguna berdasarkan arah kepala ke batang tubuh diterangkan, serupa dengan mod orientasi badan AirPods.

Dalam paten 2021, Apple menegaskan bahawa set kepala AR/VR boleh dilengkapi dengan pelbagai susunan mikrofon, menyokong pengesanan audio berarah dan boleh mengira sumber bunyi dalam persekitaran sekeliling serta menandakan atau pembayang secara visual. Fungsi sedemikian boleh melengkapkan pendengaran manusia dengan baik dan membantu pengguna mengenal pasti bunyi di luar julat persepsi biasa (konsep serupa juga boleh menggunakan AR untuk menandakan gas, isyarat elektromagnet, dsb. yang tidak dapat dilihat dengan mata kasar).

Dalam paten 2023 (US2023014111A1), ia juga menegaskan bahawa penapis spatial boleh digunakan untuk menambah isyarat spatial pada audio binaural mengikut persekitaran pengguna, menjadikan pengalaman sebenar audio spatial lebih mengasyikkan.

Tujuh, sistem kedudukan

◎ Kedudukan ultrasonik

Pada masa ini, kedudukan VR arus perdana adalah berdasarkan penyelesaian optik, seperti inframerah, CV, dsb. Dalam nombor paten US20190094955A1, Apple mencadangkan penyelesaian penentududukan ultrasonik berdasarkan prinsip julat masa penerbangan, mendakwa bahawa ia boleh mengukur jarak relatif antara penderia dan dinding, sasaran dan halangan, menjana peta 3D untuk persekitaran sekeliling, dan cari Pengawal, set kepala dan mengesan halangan serta mengenal pasti permukaan.

◎ 3D julat/pengimbasan

Apple telah menyebut dalam paten lebih daripada sekali bahawa set kepala AR/VR boleh dilengkapi dengan berbilang penderia 3D, termasuk: penderia cahaya berstruktur, modul penderia imej 3D binokular (terdiri daripada 2 atau lebih kamera), LiDAR, penderia Radio 3D, kamera inframerah atau CV, dsb. Penderia ini boleh digunakan untuk mencari ruang dan mengenal pasti halangan.

Lapan, sensor lain

◎ Tatasusunan berbilang sensor

Pada tahun 2021, USPTO mendedahkan paten AR/VR utama daripada Apple (US20210165229A1), yang menerangkan set kepala AR/VR berpecah yang dilengkapi dengan berbilang kamera dan penderia. Mengapa ia penting? Pertama sekali, pencipta paten adalah beberapa tokoh penting di Apple, seperti pencipta bersama HoloLens Avi Bar-Zeev, dan Geoff Stahl, yang telah bekerja di Apple selama lebih daripada 20 tahun. Baru-baru ini, Bloomberg mendedahkan bahawa Stahl kini bertanggungjawab untuk sistem pengendalian xrOS, aplikasi utama dalam projek AR/VR Apple.

Selain itu, dalam nombor paten US20210294104A1, Apple juga membayangkan set kepala AR/VR boleh dilengkapi dengan lebih banyak penderia, seperti kamera, modul penjejakan mata, lidar, modul pengecaman cap jari dan modul pengecaman gerak isyarat , penderia ultrasonik, optik penderia jarak, penderia pengimbasan retina, penderia suhu, EMG, penderia oksigen, penderia kadar jantung, penderia aliran darah, penderia perintang, tolok terikan, pecutan, penderia magnet, potensiometer, dsb.

◎ Penderia dewan (No. US10557724B1)

Biasanya, set kepala AR/VR menggunakan penderia jarak untuk mengesan status pemakaian Selepas mengesan bahawa pengguna memakai set kepala, sistem akan dihidupkan dan selepas mengesan bahawa pengguna telah menanggalkan set kepala, ia akan masuk. keadaan siap sedia. Berbanding dengan penderia jarak, penderia Hall lebih menjimatkan kuasa Apple berharap dapat menggunakan berbilang penderia Hall dan mekanisme magnet dalam set kepala untuk menentukan status pemakaian dengan mengesan sudut putaran peranti. Malah, fon kepala Bluetooth Apple AirPods juga menggunakan penderia Hall.

Sembilan, reka bentuk penampilan

◎ Tombol Digital

Dalam berbilang paten (seperti US20210089136A1), Apple telah menyebut aplikasi reka bentuk tombol digital pada set kepala AR/VR. Sebenarnya, tombol digital ialah kaedah interaksi klasik untuk produk Apple Ia telah muncul sebelum ini dalam set kepala Apple Watch dan AirPods Max Apabila digunakan dalam set kepala AR/VR, ia boleh melaraskan kelantangan, kecerahan skrin dan juga bertukar antara AR dan Mod VR.

Menariknya, dalam paten bernombor US20230162929A1, Apple menegaskan bahawa tombol digital boleh menyokong operasi yang lebih kompleks, seperti menggabungkan berbilang tindakan putaran untuk mencetuskan arahan gabungan untuk mencapai interaksi yang lebih kaya.

◎ Bahan tekstil pintar yang fleksibel

Pada masa ini, AR/VR terutamanya menggunakan pembalut fabrik pada selongsong luar, dan reka bentuk fabrik konduktif masih belum digunakan. Dalam nombor paten US20190191557A1, Apple mencadangkan penyelesaian fabrik pintar yang fleksibel, yang menampilkan kabel konduktif beralur terbina dalam dan boleh digunakan dalam peranti boleh pakai seperti lilitan lengan dan cermin mata AR.

◎ Kamera tersembunyi

Bahagian penting set kepala AR/VR ialah penderia optik dan kamera, yang digunakan terutamanya untuk mengesan persekitaran, kedudukan dan pengecaman gerak isyarat. Memakai cermin mata AR sepanjang masa boleh menyebabkan kamera dan penderia pada cermin mata berjalan terlalu lama, menyebabkan rasa tidak puas hati daripada orang lain di sekeliling anda. Untuk menjadikan kamera kelihatan lebih tersembunyi, Apple mencadangkan salutan cermin sehala pemancar cahaya inframerah dalam paten (No. US20190353836A1 Prinsipnya serupa dengan cermin sehala yang biasa digunakan di bilik soal siasat polis). boleh melalui cahaya Inframerah (tidak menjejaskan kedudukan SLAM), kamera dalaman tidak boleh dilihat dari luar.

◎ Kawalan sentuh kawasan besar pada selongsong

Dalam nombor paten US20210089150A1, Apple mencadangkan reka bentuk perumahan paparan AR/VR yang didayakan sentuh kawasan besar, yang dicirikan dengan dilengkapi dengan penderia, butang gelangsar, tombol dan kaedah pengendalian lain untuk menyokong kawalan luaran yang fleksibel. .

Dalam paten lain, Apple turut menyebut beberapa jenis butang "halimunan" dan penyelesaian gelangsar sentuh yang tidak mudah dilihat dengan mata kasar untuk mengoptimumkan reka bentuk estetik produk set kepala AR/VR.

◎ Kotak paparan kepala AR

Apple telah mencadangkan reka bentuk kotak paparan dipasang pada kepala AR/VR dalam berbilang paten Cirinya ialah telefon mudah alih boleh dimasukkan terus ke dalam bingkai lensa untuk memaparkan kandungan di hadapan mata pengguna. Kuil juga boleh dilengkapi dengan penderia sentuhan untuk mengendalikan antara muka AR/VR. Dalam paten yang dikemas kini pada 2022 (US11258891B2), ciri baharu turut ditambah: sokongan untuk penukaran mod AR (mod VST)/VR.

Berbanding dengan set kepala AR/VR bersepadu, kelebihan kotak set kepala ialah kosnya lebih rendah, boleh menggunakan iPhone sedia ada secara fleksibel, malah boleh melindungi privasi melihat telefon mudah alih. Namun, jika dilihat dari beberapa siri pendedahan, nampaknya Apple tidak akan melancarkan produk sedemikian buat masa ini.

◎ Cermin mata AR modular

Dalam paten yang diterbitkan pada tahun 2020, Apple menghasilkan reka bentuk produk cermin mata AR yang agak maju, yang dicirikan oleh kanta, bingkai dan bahagian lain yang sangat modular dan boleh diganti dan dibuka mengikut keperluan dan senario yang berbeza, menggantikan yang berbeza komponen, seperti modul paparan resolusi tinggi, bateri tahan lama, komponen yang lebih kecil, dsb. Perlu diingat bahawa bingkai cermin mata AR dan kuil menggunakan struktur tanggam dan duri pemalam, jadi pengguna boleh memasang sendiri cermin mata AR lengkap tanpa bantuan alat tambahan. Permainan ini serupa dengan mekanisme tali yang boleh diganti Apple Watch, membolehkan pengguna memperibadikan produk.

◎ Sistem audio AR/VR yang boleh dikonfigurasikan dan boleh dikembangkan (No. US20200089008A1)

Earcup fon telinga diperbuat daripada bahan buih boleh ubah bentuk, yang boleh ditiup dan dikempiskan untuk bertukar antara mod pengurangan hingar dan penembusan untuk menukar mod audio. Dalam adegan VR, anda boleh bertukar dengan cepat kepada audio imersif (mod pengurangan hingar), manakala dalam adegan AR, ia ditukar kepada audio terbuka, yang memainkan bunyi melalui prinsip pengaliran tulang.

◎ Mod perlindungan kanta

Jurutera Apple membayangkan mekanisme perlindungan dalam paten yang diterbitkan pada Disember 2019 untuk mengelakkan kanta cermin mata AR daripada pecah apabila hentaman daripada jatuh. Penyelesaian ini boleh mengesan status cermin mata AR melalui penderia Apabila cermin mata jatuh bebas dan dipukul, mod perlindungan sistem optik akan diaktifkan, iaitu, kanta yang berkaitan akan digerakkan dan udara atau cecair khas akan diisi. antara kanta untuk membentuk penimbal Ini mengurangkan kehilangan tidak sengaja yang disebabkan oleh perlanggaran.

Dalam nombor paten US20210302745A1, Apple juga mencadangkan sistem semakan kendiri modul optik Apabila kejatuhan, perlanggaran, dll. dikenali, ia akan secara automatik mengesan ketidakselarasan komponen dalaman dan secara automatik melakukan pampasan kedudukan untuk memulihkan keadaan nilai.

Menariknya, dalam paten lain (US11340466B2), Apple turut mencadangkan reka bentuk bingkai elastik, yang dicirikan oleh kuil boleh ubah bentuk yang boleh bertindak sebagai penimbal apabila dipukul, mengelakkan mod optik seperti pandu gelombang optik.

◎ Pengoptimuman tali alat dengar

No. US20190072772A1: Biasanya, pengguna perlu melaraskan tali mengikut bentuk kepala mereka sebelum memakai set kepala AR/VR Ini memerlukan proses, jadi ia tidak boleh digunakan seperti telefon bimbit. Apabila berbilang orang berkongsi set kepala AR/VR, semua orang perlu melaraskan tali, yang boleh menyusahkan.

Untuk memudahkan proses memakai set kepala, Apple menerangkan sistem pengikat mekanikal dalam paten, yang dicirikan dengan mengenali parameter kepala pengguna dan menyesuaikan secara automatik dengan saiz. Perlu diingat bahawa sistem juga akan menyesuaikan berdasarkan gerak isyarat dan kandungan yang dipasang di kepala, seperti membantu dalam menanggalkan dan memakai tindakan melalui kedudukan tangan pengguna Apabila menjalankan kandungan yang tidak memerlukan pengguna untuk bergerak (seperti menonton filem), tali akan berehat.

Selain itu, Apple turut mencadangkan sistem ikat kepala boleh lipat (US11320659B1) dalam paten, yang menampilkan gabungan tali fleksibel dan modul magnet Ia dicirikan oleh penyimpanan yang mudah dan menyokong pengembangan modular ( Contohnya, pasangkan kamera, bateri, pembesar suara dan komponen lain pada ikat kepala).

10, reka bentuk UX

◎ Sistem penyejukan aktif

No. US20190075689A1: Untuk meningkatkan kecekapan pelesapan haba, Quest 2 telah menggunakan kipas untuk menghilangkan haba secara aktif. Sebaliknya, penyelesaian yang diterangkan dalam paten Apple mempunyai pengudaraan yang lebih baik dan dicirikan oleh dua kipas pada bahagian atas dan bawah alat dengar untuk mencapai perolakan atas dan bawah untuk menyejukkan bahagian dalaman.

Selain itu, sistem kipas boleh melaraskan keamatan secara dinamik mengikut tugas rendering, dan juga boleh meniup udara pada muka untuk menyejukkan kulit.

Dalam paten 2022, Apple seterusnya mencadangkan sistem kawalan hingar kipas, yang dicirikan dengan mengenal pasti hingar sistem penyejukan dan melaraskan kelajuan kipas dalam masa nyata untuk mengurangkan bunyi bising bagi mengelakkan gangguan pengguna dan membuat serta menerima panggilan , Komunikasi pembantu suara Siri. Menariknya, volum kipas juga boleh ditingkatkan untuk memberi amaran kepada pengguna bahawa terdapat halangan di sekeliling mereka.

◎ Pembersihan sendiri komponen optik

Kami tahu bahawa set kepala AR/VR biasanya berdasarkan struktur optik yang tepat Jika habuk atau serpihan memasuki celah antara kanta dan skrin paparan, ia berkemungkinan menghalang penyebaran sumber cahaya, sekali gus menjejaskan kesan paparan. . Walau bagaimanapun, komponen optik biasanya sukar dibongkar dan sukar dibersihkan secara manual. Oleh itu, Apple menunjukkan penyelesaian optik pembersihan sendiri dalam paten yang diterbitkan pada tahun 2021. Konsep ini cukup mudah terutamanya mengesan kualiti optik Apabila masalah berlaku, ia menyingkirkan zarah debu dan mengeluarkannya dengan selamat penglihatan pengguna.

◎ Sistem Penyesuaian Muka

No. US20200081259A1: Apple telah mencadangkan sistem sokongan muka yang dipasang di kepala, yang dicirikan oleh penggunaan bahan yang boleh ditarik balik, bahan kembung dan bahan getah elastik Kelebihannya ialah ia boleh dilaraskan mengikut wajah orang yang berbeza struktur (dahi, dahi, Pipi, pelipis) pelarasan, walaupun topeng tidak sejajar akibat goncangan set kepala, muat boleh dilaraskan untuk meningkatkan keselesaan.

◎ Pengesahan dan buka kunci merentas peranti

Dalam paten yang dipanggil "Authentication Device Assisted User Authentication" (US10893412B2), Apple menunjukkan penyelesaian pengesahan berdekatan berbilang peranti yang membolehkan pengguna memakai set kepala AR/VR untuk terus membuka kunci iPhone mereka, sekali gus menghapuskan keperluan untuk Ulang langkah-langkah memakai dan menanggalkan set kepala dan membuka kunci telefon. Reka bentuk pautan merentas peranti ini telah diterima pakai pada Apple Watch, membolehkan anda membuka kunci komputer iPhone atau Mac anda dengan cepat. Selain menggunakan fungsi buka kunci, anda juga boleh mengunci peranti seperti telefon mudah alih dengan menggunakan paparan yang dipasang di kepala, dan anda juga boleh menyediakan mekanisme pengesahan dua langkah.

Dalam paten lain bernombor US20210105614A1, Apple turut menyebut sistem pengesahan dan buka kunci berbilang peranti yang serupa, membenarkan pengguna menggunakan set kepala AR/VR untuk membuka kunci peranti Apple yang berdekatan.

◎ Paparan gabungan dipertingkatkan

Tidak. US10347050B1, Apple telah mencadangkan penyelesaian untuk menggunakan AR untuk memesongkan imej bagi meningkatkan kesan paparan Cirinya ialah menggunakan AR untuk menukar kesan visual persekitaran sebenar dengan mengenal pasti titik buta visual pengguna, menjadikannya tidak kelihatan. kepada pengguna asal Kandungan tersebut juga boleh dilihat dalam beberapa bentuk. Penyelesaiannya adalah berdasarkan teknologi penjejakan mata dan memerlukan penggunaan persepsi kedalaman 3D untuk menangkap pemandangan sekeliling.

◎ Pengecasan aruhan wayarles untuk set kepala

Dalam nombor paten US20200081490A1, Apple mencadangkan dirian pengecasan induktif yang sesuai untuk set kepala AR/VR Cirinya ialah set kepala boleh digantung terus padanya untuk paparan, atau bateri boleh diasingkan dan diletakkan pada dirian untuk mengecas. Kelebihan reka bentuk ini ialah ia boleh mencapai storan dan paparan paparan kepala yang cantik, dan paparan kepala boleh dicas apabila tidak digunakan, menjadikannya mudah untuk pengguna mengambil dan menggunakannya pada bila-bila masa.

◎ AirPlay

Dalam berbilang paten, Apple telah mencadangkan penyelesaian untuk memautkan set kepala AR/VR dengan komputer, komputer riba dan TV Konsep ini serupa dengan fungsi AirPlay sedia ada, yang boleh menyegerakkan skrin peranti sekeliling lain dalam set kepala dengan cepat. (Untuk memainkan video, memuatkan dokumen, e-mel, dll.).

◎ Sistem komunikasi gelombang milimeter

Dalam paten 2020, Apple mencadangkan penyelesaian interaksi berbilang orang berdasarkan gelombang milimeter, yang dicirikan dengan merealisasikan komunikasi tanpa wayar berskala besar dengan peranti elektronik melalui stesen pangkalan gelombang milimeter dan berbilang stesen pangkalan geganti, seperti penstriman kandungan ke beberapa set kepala AR/VR, dsb.

Sebelas, senario aplikasi

Dalam sesetengah paten, Apple telah membincangkan secara mendalam pelbagai senario aplikasi AR/VR, seperti tontonan filem yang mengasyikkan, navigasi AR, sistem panggilan video AR, dsb.

◎ Panggilan AR (No. Paten 20160344972)

Berdasarkan tangkapan kamera dan penjanaan model 3D, ia digunakan untuk mencapai panggilan AR jauh yang mengasyikkan. Penyelesaian ini boleh digunakan pada peranti seperti iPad dan Apple TV Cirinya ialah ia boleh menangkap pemanggil dan objek yang dipegang oleh pemanggil dan membentangkannya dalam video dalam bentuk maya.

Ia juga akan digabungkan dengan kamera luaran, dilengkapi dengan penderia imej RGB, penderia kedalaman, penderia IR, dsb., yang boleh mengecam gerak isyarat di udara dan memudahkan kawalan menu.

◎ Pembantu Maya

Menampilkan kesedaran konteks, menggunakan aksara atau imej yang dijana komputer untuk menggesa, menavigasi, memaparkan maklumat tambahan dan membantu pengguna menggunakan AR/VR. Selain bantuan visual, pembantu maya juga menyokong interaksi suara.

◎ Navigasi AR

No. US20170213393A1: Set kepala AR/VR Apple mungkin menyokong navigasi visual, seperti menandakan maklumat tambahan pada bangunan di tempat kejadian sebenar, tempat menarik atau menggunakan AR untuk menandakan pembesar suara dalam kereta dan fungsi lain. Selain itu, interaksi gerak isyarat disokong. Paten ini berasal daripada teknologi Metaio Selain penyelesaian navigasi AR, Metaio juga memohon paten untuk pengecaman persekitaran AR (penangkapan persekitaran 3D dan pengecaman data cuaca, masa, koordinat, dll.).

Dalam paten lain pada 2018, Apple turut mencadangkan penyelesaian peta AR 3D yang boleh dilihat dari pelbagai sudut.

◎ Siaran sukan AR

No. US20200175275A1: Tambahkan kandungan AR interaktif pada siaran perlawanan sukan untuk memperkayakan pengalaman menonton. Ciri penyelesaian ini ialah ia memerlukan penggunaan peranti luaran untuk mengesan tempat menarik penonton dan memaparkan maklumat tambahan berdasarkan ini Sebagai contoh, apabila anda berminat dengan kasut pemain bola keranjang, sistem akan memaparkan maklumat tentang kasut pada TV Model kasut juga boleh dipaparkan dalam bentuk AR, membolehkan penonton melihatnya dari pelbagai sudut.

◎ Kekunci kroma kependaman rendah

Zum dan perisian video lain sudah menyokong fungsi penggantian latar belakang, dan dalam set kepala realiti campuran VST, penggantian latar belakang juga boleh digunakan dengan baik, seperti menggantikan orang dan objek di hadapan anda dengan gaya latar belakang sebenar dan menggantikannya dengan latar belakang maya dalam masa nyata. Penyelesaian berpaten Apple berbeza daripada penyelesaian penggantian latar belakang biasa kerana ia lebih tiga dimensi dan boleh menampilkan latar belakang 3D dan bukannya imej 2D.

◎ Bekerjasama dengan komputer

Dalam sesetengah paten, Apple menyebut penggunaan AR/VR dalam senario pejabat, seperti menggunakan skrin maya untuk mengembangkan kawasan paparan skrin komputer dengan komputer Mac, atau memaparkan kandungan skrin komputer dalam set kepala untuk melindungi privasi Pengguna dan menghalang pengintipan skrin.

◎ Telefon mudah alih, dsb. disambungkan ke set kepala AR/VR (No. US20190065027A1)

Menerangkan penyelesaian interaksi sentuhan pisah tertentu, yang menggunakan peranti seperti telefon mudah alih dengan pad sentuh, butang sentuh dan paparan untuk mengawal kandungan yang dipaparkan oleh set kepala AR/VR. Dalam erti kata lain, menggunakan iPhone sebagai pengawal untuk set kepala AR/VR boleh dilihat sebagai satu lagi cara interaksi selain gerak isyarat dan pengawal, dan boleh disepadukan dengan baik dengan keluarga peranti Apple.

◎ teknologi pengekodan/penyahkodan video 360°

No. Paten 20190004414 menunjukkan resolusi penyesuaian dan format unjuran Ia dicirikan oleh berbilang skema konfigurasi pengekodan pratetap Anda boleh memilih sama ada untuk memasukkan bingkai mengikut kesan pengimejan, dengan itu meningkatkan kualiti pemaparan video 360° dan MR. .

Walaupun kami mempunyai paten ini, ia hanya mendedahkan sebahagian kecil daripada pembangunan peranti Apple XR, jadi rupa dan fungsi akhir tidak dapat ditentukan. Artikel ini hanyalah titik permulaan, memberikan anda beberapa petunjuk dan inspirasi melalui paten ini. Peranti XR Apple masih belum diumumkan, dan kami tidak sabar-sabar untuk memberikannya sekilas di WWDC23.

Atas ialah kandungan terperinci Gali ratusan paten AR/VR dan terokai semua aspek Apple XR. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!