Last Updated on 2024-06-12 07:00 by 荒木 啓介
visionOS 2はApple Vision Proの手の追跡機能と環境理解を大幅に改善している。visionOS 1では開発者に30Hzで新しい手の追跡ポーズを提供していたが、visionOS 2ではディスプレイのリフレッシュレート、通常は90Hzで提供されるようになった。また、開発者がオプションで有効にできる予測機能が追加され、フレームが表示される時点での手の位置を推測することで、実質的な遅延を低減するが、精度とのトレードオフがある。
Apple Vision Proは発売以来、LiDARセンサーによって生成される環境の3Dメッシュを開発者に連続的に提供していた。visionOS 2では、部屋の追跡が導入され、開発者には各部屋の壁や床の正確なジオメトリが提供されるようになり、非長方形の壁もサポートされる。新しい部屋に入ると、システムは開発者に通知し、新しい部屋のジオメトリのみを提供する。さらに、visionOS 2では斜面を検出する機能も改善され、水平面と垂直面だけでなく、斜面も検出できるようになった。これらの改善により、開発者は物理的な環境をより意識したアプリを構築し、実世界の表面にアンカーを置くことができるようになる。
【ニュース解説】
Apple Vision Proの最新オペレーティングシステムであるvisionOS 2が、手の追跡機能と環境理解の面で大幅な改善をもたらしています。これまでのバージョンでは、開発者は30Hzの更新率で手の追跡データを受け取っていましたが、visionOS 2ではこの更新率が大幅に向上し、ディスプレイのリフレッシュレートに合わせて90Hzで手のポーズデータを提供するようになりました。これにより、よりスムーズで自然な手の動きが実現され、特に動きが速いゲームやアプリケーションでの体験が向上します。
さらに、開発者はオプションで予測機能を有効にすることができ、これによりフレームが表示される時点での手の位置を推測し、実質的な遅延を低減することが可能になります。ただし、この機能は精度とのトレードオフがあり、特に精密な操作が求められる場面では慎重な使用が推奨されます。
環境理解の面では、Apple Vision ProはこれまでLiDARセンサーを用いて環境の3Dメッシュを生成していましたが、visionOS 2ではさらに進化し、部屋の追跡機能が導入されました。これにより、開発者は各部屋の壁や床の正確なジオメトリを取得できるようになり、非長方形の壁にも対応します。新しい部屋に入ると、システムは開発者に通知し、新しい部屋のジオメトリのみを提供するため、よりリアルタイムでダイナミックなアプリケーションが可能になります。
また、斜面の検出機能の改善により、開発者は水平面や垂直面だけでなく、斜面にもアプリケーションをアンカーすることができるようになりました。これにより、より複雑な物理的環境に対応したアプリケーションの開発が可能となり、ユーザーにとってよりリアルな拡張現実体験を提供できるようになります。
これらの技術的進歩は、Apple Vision Proを使用する開発者にとって大きな可能性を開くものです。より高速で正確な手の追跡と、環境のより深い理解により、教育、ゲーム、プロフェッショナルなワークフローなど、さまざまな分野でのアプリケーションがよりリアルで没入感のある体験を提供できるようになります。しかし、これらの技術の進化は、プライバシーやセキュリティに関する新たな課題をもたらす可能性もあり、開発者とユーザー双方にとって慎重な取り扱いが求められます。
from visionOS 2 Also Improves Apple Vision Pro's Hand Tracking & Scene Understanding.
