今月初め、Appleの年次開発者会議であるWWDC 2022で、同社は開発者に、iOSデバイスでARアプリを構築するためのAppleのARKit6ツールキットの改善点を最初に見てもらいました。
AppleはまだARヘッドセットの存在を明らかにしていない（あるいは確認していない）が、同社がARについて絶対に真剣に取り組んでいる最も明確な兆候は、Appleが2017年から進歩しているiOSデバイス上でARアプリを構築するための開発者ツールキットであるARKitである。
WWDC 2022で、Appleは最新バージョンのARKit 6を発表しました。これにより、コア機能が改善され、開発者はiPhoneやiPad（そして最終的にはヘッドセット…）向けのより優れたARアプリを構築できるようになります。
間に WWDC6での「DiscoverARKit2022」開発者セッション、AppleARKitエンジニアのChristianLipskiが、次のステップの概要を説明しました。
より良いモーションキャプチャ
ARKitには、ビデオフレーム内の人物を追跡するMotionCapture関数が含まれており、開発者に人物の頭と手足の位置を推定する「スケルトン」を提供します。 これにより、開発者は、拡張されたものを人物にオーバーレイしたり、人物に対して相対的に移動したりするアプリを作成できます（これは、拡張されたコンテンツを誰かの後ろに配置して、より現実的にシーンに埋め込むためのオクルージョンにも使用できます）。
ARKit 6で、Lipskiは、この機能が「一連の更新」を取得していると述べています。これには、被験者の左耳と右耳の位置を推定する2Dスケルトンの追跡の改善が含まれます（これは、眼鏡を試して、フェイスフィルターに確実に役立ちます）。 AR、および頭を含む同様の機能を使用）。
奥行きのあるポーズ推定を提供する3Dスケルトンに関しては、Appleは、ユーザーがカメラのエッジや他のオブジェクトによって遮られたときに、ジッターが少なく、時間の一貫性が高く、堅牢性が高い、より良い追跡を約束しています（ただし、これらの機能強化の一部はiPhone 12以降でのみ使用可能）。
カメラアクセスの改善
ARKit 6は、追跡用のARアプリで使用されている間、開発者がデバイスのカメラをより細かく制御できるようにします。
開発者は、iPhone4以降および最新のiPadPro（M30）で11FPSで最大1Kの着信フレームにリアルタイムでアクセスできるようになりました。 低解像度で高フレームレート（60FPS）を使用する以前のモードは、引き続き開発者が利用できます。 Lipskiは、開発者は使用するモードを慎重に検討する必要があると述べています。 ビデオのプレビューや録画に重点を置いたアプリ（仮想プロダクションアプリなど）には4Kモードの方が適している場合がありますが、ゲームなどの応答性のメリットがあるアプリには、低解像度の60FPSモードの方が適している場合があります。
ARアプリでのより高いビデオ解像度と同様に、開発者はARアプリがカメラをアクティブに使用しているときでもフル解像度の写真を撮ることができるようになりました。 つまり、12MPの画像を（とにかくiPhone 13で）取り出して、他の場所に保存したり使用したりできるということです。 これは、写真のキャプチャがエクスペリエンスの一部であるARアプリに最適です。 たとえば、Lipski氏によると、ユーザーがオブジェクトの写真を撮って、後で写真測量を使用して3Dモデルに変換するようにガイドされるアプリです。
ARKit 6を使用すると、ARアプリで使用している間、開発者はカメラをより細かく制御できます。 開発者は、必要に応じてホワイトバランス、明るさ、フォーカスなどを調整でき、すべての着信フレームからEXIFデータを読み取ることができます。
その他のロケーションアンカー…ロケーション
ARKitには、一部の都市でARのストリートレベルの追跡を提供できるLocationAnchorsが含まれています（たとえば、拡張現実のターンバイターン方式の経路案内を行うため）。 Appleはこの機能をより多くの都市に拡大しており、現在はカナダのバンクーバー、トロント、モントリオールが含まれています。 日本の福岡、広島、大阪、京都、名古屋、横浜、東京。 とシンガポール。
今年後半には、この機能はニュージーランドのオークランドにさらに拡大されます。 テルアビブ-イスラエル、ヤフォ; そしてフランスのパリ。
プレーンアンカー
平面アンカーは、ARセッション中にテーブル、床、壁などの平らなオブジェクトを追跡するためのツールです。 ARKit 6より前は、より多くの平面が検出されると、平面アンカーの原点が更新されていました（たとえば、デバイスを移動して、カメラが以前に見たよりも多くのテーブルを表示します）。 これにより、原点が最初に配置された後に回転された場合、拡張オブジェクトを平面上の所定の位置にロックしたままにすることが困難になる可能性があります。 ARKit 6では、セッション中に平面の形状がどのように変化しても、原点の回転は静的なままです。
– – — – –
ARKit 6は、iOS 16アップデートでリリースされます。このアップデートは、現在ベータ版で開発者向けに提供されており、今秋に一般公開される予定です。
