Apple Vision Pro for Healthcare: ‘The Ultimate Display’? — Entering the Wonderland of Precision

要約

2023 年 6 月の Worldwide Developers Conference (WWDC) で、Apple は Vision Pro を発表しました。
Vision Pro は、複合現実 (MR) ヘッドセットであり、より具体的には、追加のビデオ シースルー (VST) 機能を備えた仮想現実 (VR) デバイスです。
VST 機能により、Vision Pro は拡張現実 (AR) デバイスにもなります。
AR 機能は、カメラを介して現実世界をユーザーの目の前にある (VR) 画面にストリーミングすることで有効になります。
もちろんこれは独自のものではなく、Varjo XR-3 などの他のデバイスと同様です。
それにもかかわらず、Vision Pro には、ヘッドセット装着者の目を「部外者」に見せることができる裏返しのスクリーンや、デジタル コンテンツをシームレスにブレンドできる上部の「デジタル クラウン」と呼ばれるボタンなど、いくつかの興味深い機能があります。
回転させることで物理的な空間を変えることができます。
さらに、バッテリーへのケーブルを除いてケーブルが接続されていないため、Varjo XR-3 と比較してヘッドセットの機敏性が向上しています。
これは実際、アイヴァン・サザーランドが 1965 年にすでにスケッチしていた「究極のディスプレイ」に近づく可能性があります。究極のディスプレイと同様、まだ一般には公開されていませんが、この視点で水晶玉を調べて、それが可能であるかどうかを確認したいと考えています。
特に医療分野で AR が依然として直面しているいくつかの臨床課題を克服できますが、それを超えて、Vision Pro が臨床医を支援して患者とより多くの時間を費やす重要なタスクをサポートできるかどうかについても議論します。

要約(オリジナル)

At the Worldwide Developers Conference (WWDC) in June 2023, Apple introduced the Vision Pro. The Vision Pro is a Mixed Reality (MR) headset, more specifically it is a Virtual Reality (VR) device with an additional Video See-Through (VST) capability. The VST capability turns the Vision Pro also into an Augmented Reality (AR) device. The AR feature is enabled by streaming the real world via cameras to the (VR) screens in front of the user’s eyes. This is of course not unique and similar to other devices, like the Varjo XR-3. Nevertheless, the Vision Pro has some interesting features, like an inside-out screen that can show the headset wearers’ eyes to ‘outsiders’ or a button on the top, called ‘Digital Crown’, that allows you to seamlessly blend digital content with your physical space by turning it. In addition, it is untethered, except for the cable to the battery, which makes the headset more agile, compared to the Varjo XR-3. This could actually come closer to the ‘Ultimate Display’, which Ivan Sutherland had already sketched in 1965. Not available to the public yet, like the Ultimate Display, we want to take a look into the crystal ball in this perspective to see if it can overcome some clinical challenges that – especially – AR still faces in the medical domain, but also go beyond and discuss if the Vision Pro could support clinicians in essential tasks to spend more time with their patients.

arxiv情報

著者 Jan Egger,Christina Gsaxner,Xiaojun Chen,Jiang Bian,Jens Kleesiek,Behrus Puladi
発行日 2023-08-09 13:34:57+00:00
arxivサイト arxiv_id(pdf)

提供元, 利用サービス

arxiv.jp, Google

カテゴリー: cs.AI, cs.GR, cs.HC パーマリンク