Pelan realiti bercampur Microsoft jauh melampaui kesilapan

Apabila Microsoft membuat pengumuman mengejutkan produk realiti baru (AR) pada acara Windows 10 pada awal tahun 2015, alat dengar Microsoft HoloLens itu sendiri bukanlah perkara pertama yang dilihat penonton. Apabila melancarkan teknologi baru ke dunia, pencipta Alex Kipman dari kedua-dua pengawal gerakan Microsoft Kinect serta HoloLens-sebaliknya menunjukkan logo untuk Windows Holographic, platform perisian sejajar Windows 10 yang mendasari cita-cita AR Microsoft.

Lebih dari dua tahun kemudian, perisian yang menjanakan ekosistem AR AR yang semakin meningkat Microsoft masih merupakan petunjuk terbaik di mana syarikat itu merancang untuk mengambil masa depannya "realiti campuran" (MR). Ia mempunyai nama yang berbeza sekarang; Microsoft mencipta semula Windows Holographic untuk Realiti Campuran Windows, tetapi matlamatnya tidak berubah. Microsoft mahu membina rangkaian antara AR, VR, dan alat dengar realiti bercampur dari pengeluar yang berbeza, semua bercakap antara satu sama lain dan menjalankan Windows 10 Universal Apps.

Terdapat tiga cara untuk pendekatan ini: Perkakasan pertama pihak Microsoft (HoloLens), stack perisian yang berkembang di dalam platform Windows Mixed Reality, dan perkongsian perkakasan pihak ketiga Microsoft dengan Acer, Asus, Dell, HP dan Lenovo untuk membina $ 299 alat dengar realiti bercampur yang menjalankan Windows 10. Yang pertama, headset Acer Windows Mixed Reality Development Edition, sudah pun dihantar kepada pemaju.

Apakah Realiti Campuran?

Microsoft bukanlah satu-satunya syarikat AR yang telah mula menggunakan istilah istilah realiti untuk membezakan antara mata yang berbeza pada spektrum AR / VR. Di satu pihak, anda mempunyai cermin monokular yang anda lihat dari syarikat seperti Vuzix, dan AR berasaskan telefon pintar yang dipopularkan oleh aplikasi seperti Pokemon Go.

Di sisi yang lain, terdapat pengalaman pengekstrakan kepala binokular yang lebih mendalam (memaparkan kedua-dua mata dengan penglihatan 360 darjah) peranti seperti HoloLens, gelas ODG R-9, atau Magic Leap yang tidak kelihatan. Dalam istilah yang lebih ringkas, anda boleh memikirkan AR sebagai menambah maklumat overlaid atau objek maya dengan lebih banyak cara dua dimensi di atas apa yang ada di hadapan anda.

Tetapi kontinum di mana jenis teknologi ini wujud lebih mendalam daripada itu. Jika anda membayangkan spektrum dengan dunia fizikal di satu pihak dan realiti maya yang sebenar di pihak yang lain, ia akan kelihatan seperti ini:

Dunia Fizikal -> Realiti Semula -> Realiti Campuran <- Keberkesanan Semula <- Realiti Maya

(Jangan terlalu bimbang tentang kebajikan yang ditonjolkan sekarang ini).

Industri ini terperangkap dalam terminologi yang membingungkan pada masa ini, tetapi memisahkan semua jargon adalah penting bukan sahaja dalam memahami ekosistem, tetapi mengenal pasti semua titik di mana Microsoft merancang untuk memasangkannya. Sekiranya visi teknologi gergasi itu berlalu, perisian realiti bercampur Microsoft mungkin berjalan dalam bentuk headset dari $ 299 hingga $ 3, 000, yang tertanam dalam pengalaman pengguna dan perusahaan merentasi permainan, e-dagang, reka bentuk perindustrian dan pembuatan, visualisasi data perusahaan interaktif, perubatan, dan di luar.

Bagaimana Anda Membangun OS Realiti Campuran

Semasa taklimat baru-baru ini dengan Microsoft, PCMag mendapat peluang untuk secara ringkas memeriksa alat dengar rakan kongsi Acer baru. Kami juga mendapat pecahan perisian perisian Windows Mixed Reality, termasuk beberapa pandangan mengenai bagaimana Microsoft bekerja dengan OEM untuk membina alat penyetelan $ 299 dan apa yang diperbaharui Windows 10 Pencipta pada masa kini untuk aplikasi Windows realiti campuran pada pelbagai peranti pengkomputeran yang berbeza.

Platform Reality Windows Mixed jatuh ke dalam beberapa lapisan yang berlainan. Di bahagian atas timbunan, anda mempunyai paparan yang dipasang kepala (HMD) dengan enam Derajat Kebebasan (6DoF), yang mewakili tahap gerak tiga dimensi dan penjejakan posisi yang disokong. HoloLens menggunakan apa yang dipanggil Microsoft di dalam keluar 6DoF, yang bermaksud penjejakan kedudukan yang menggabungkan data dari pelbagai sensor input dan kamera dengan algoritma untuk mengekalkan pengalaman itu dengan lancar.

Untuk konteks, alat VR tanpa wayar yang menggunakan paparan telefon pintar termasuk Samsung Gear VR dan Google Daydream View kini menyokong 3DoF, kadangkala dikenali sebagai roll-yaw-roll. Alat dengar VR tetikus seperti Oculus Rift dan HTC Vive mempunyai penjejakan kedudukan 6DoF.

Pembaruan Pencipta Windows 10 termasuk sokongan untuk kawalan gerakan 6DoF di Acer dan alat dengar OEM yang akan datang. Edisi Pembangunan Realiti Acer Windows Mixed termasuk dua kamera pengesan kedudukan menghadap depan dan paparan dual, berbanding dengan empat kamera yang anda dapati pada HoloLens yang lebih mahal (kedua-dua kamera HoloLens ditambah digunakan untuk pemetaan spasial), tetapi semua lima rakan kongsi alat dengar akan menyokong 6DoF. Kemas kini yang akan datang pada tahun ini akan menambah sokongan untuk cip grafik bersepadu dalam alat dengar realiti bercampur, walaupun perkakasan memerlukan cip generasi ^ke- 7 Intel yang baru-baru ini untuk mendapatkan kemas kini.

Lapisan seterusnya dalam stack Reality Mixed Windows mengendalikan input, middleware, dan antara muka pengaturcaraan aplikasi (API) untuk realiti campuran dan persepsi spasial. Lapisan masukan memproses semua data input visual, giroskopik, suara, dan spatial yang mengumpul peranti AR / VR pada bila-bila masa tertentu. Ini mungkin merangkumi data dari sumber termasuk sistem koordinasi, pandangan dan arah, gerak isyarat, input suara, bunyi spatial, dan pemetaan spasial.

Lapisan middleware dan API adalah kunci untuk memahami bagaimana platform mula menyambung kepada ekosistem perisian AR / VR yang lain. Dokumentasi pemaju Realiti Windows Mix sudah termasuk arahan untuk membina aplikasi holografik menggunakan platform popular termasuk Unity (enjin pembangunan silang platform), Vuforia (platform pembangunan AR), dan protokol middleware untuk membina aplikasi MR menggunakan runtime Microsoft DirectX.

Platform ini tidak terbuka, seolah-olah anda perlu dimainkan oleh peraturan Windows App Universal Microsoft-tetapi Microsoft menyediakan beberapa pilihan untuk memasukkan ke dalam stack perisian MR. Salah satu contohnya ialah alat dengar Projek Aloi VR Intel, dijangka pada akhir tahun ini, yang menjalankan versi perisian Windows Mixed Reality.

Lapisan akhir timbunan menambah antara muka pengguna tersuai (UI) Microsoft memanggil "shell, " bersama dengan perkhidmatan awan seperti pengesahan dan penyegerakan Xbox Live, dan mesej kerjasama melalui perkhidmatan seperti Skype. Dalam Edisi Pembangunan Realisasi Bercampur Windows Acer, kita dapat melihat ringkas, "shell" pada dasarnya merupakan sistem operasi yang diletakkan seperti bilik di dalam sebuah rumah.

Pengguna kemudian boleh menelefon ke bilik yang berbeza dan melancarkan pelbagai aplikasi yang dipaparkan sebagai ikon terapung atau menduduki jubin di dinding. Ini boleh menjadi aplikasi mudah seperti Foto, Filem dan TV, Microsoft Edge, atau juga menu Mula Windows 10 yang sepenuhnya anda boleh menavigasi dalam pengalaman yang bekerja dengan pengawal Xbox. Sudah tentu ada juga beberapa keupayaan pemodelan interaktif 3D seperti HoloLens. Contoh demo terdiri daripada gajah dan harimau yang berkeliaran di sekitar ke angkasawan melambai yang boleh anda letakkan di dalam bilik, dan aplikasi yang melancarkan anda ke dalam sistem solar 3D. Ini hanya beberapa contoh, memandangkan alat dengar OEM boleh menjalankan sebarang aplikasi Windows Universal. Dari perspektif perisian, Microsoft melihat semua peranti ini sebagai komputer Windows 10 untuk kepala anda.

Syarikat itu mungkin melepaskan spesifikasi perkakasan realiti bercampur standard di beberapa titik di jalan, tetapi pada masa ini Microsoft memberi tumpuan kepada timbunan perisian dan bersama-kejuruteraan gelombang set kepala pasangan. Sekiranya anda melihat lebih dekat pada Pengumuman Ulang Tahun Windows 10 (dan HoloLens Commercial Suite di dalamnya), anda juga boleh melihat ciri-ciri perisian Microsoft telah menambah di bawah hud untuk menjadikan HoloLens yang menghadapi perusahaan lebih menarik untuk penggunaan perniagaan arus perdana.

The HoloLens Commercial Suite melancarkan set ciri asas HoloLens Development Edition, yang membolehkan perusahaan untuk merawat alat dengar realiti campuran sebagai peranti lain dalam rangkaian IT korporat mereka. Microsoft melancarkan HoloLens Commercial Suite pada Ogos lalu untuk harga $ 5, 000, dan untuk tambahan $ 2K anda mendapat ciri termasuk pengurusan peranti mudah alih yang lebih mendalam (MDM) dengan Microsoft Intune bersama dengan Kiosk Mode, yang akan melancarkan HoloLens terus ke aplikasi tertentu pengalaman untuk tujuan demo di kedai dalam persekitaran runcit.

Suite Komersial juga dilengkapi dengan Penyulitan Pemacu Microsoft BitLocker dan akses kepada perlindungan rangkaian peribadi (VPN) maya, yang kini lebih penting daripada sebelumnya. Perkakasan berkilat akan selalu mendapat perhatian lebih, terutamanya apabila Asus, Dell, HP, dan Lenovo melancarkan alat dengar mereka sendiri pada bulan-bulan mendatang. Tetapi untuk gambaran yang jelas mengenai strategi realiti bercampur Microsoft yang diketuai, teruskan perhatian pada perisian.