本プロトコルでは、術中の視覚化を向上させ、外科的な意思決定を容易にするために、拡張現実(AR)と3次元ホログラフィックイメージングを美容鼻形成術のワークフローに統合する方法について解説します。
本プロトコルでは、術中の視覚化を向上させ、外科的な意思決定を容易にするために、拡張現実(AR)と3次元ホログラフィックイメージングを美容鼻形成術のワークフローに統合する方法について解説します。
美容鼻形成術では、患者が希望する審美的な結果を得るために、術中の参照画像に依存することがよくあります。しかし、これらの画像は通常2次元(2D)形式で表示されるため、3次元(3D)の鼻腔解剖学的構造が過度に単純化され、術者は手術野から注意をそらす必要があります。拡張現実(AR)技術は、患者固有の3Dホログラフィック画像を術者の視野に投影し、リアルタイムの空間可視化を提供することで、これらの限界を解消できる可能性があります。本記事では、3D顔面イメージングシステムとヘッドマウント型複合現実ディスプレイを用いて、美容鼻形成術のワークフローにARを統合するためのプロトコルについて説明します。術前に3D顔面画像を取得し、患者と共同でモーフ処理を行って希望する術後結果を再現し、それをホログラフィックモデルとして書き出した後、術中に手術野と視覚的に比較するために表示します。このプロトコルは手術ワークフローに正常に組み込まれ、術者は術前計画および術中評価において、実空間でホログラフィックモデルを操作することができました。本プロトコルは、美容鼻形成術にARを取り入れるための再現可能なワークフローを提供し、術中の可視化を向上させ、外科的な意思決定をサポートし、術前計画と術中の解剖学的構造との比較を容易にする可能性があります。
患者との術前の共同意思決定は、美容鼻形成術における重要な要素であり、術式に対する患者の目標を理解しつつ、潜在的な美容的結果をシミュレーションすることが含まれます。フォトシミュレーションは、現実的に達成可能な内容を伝えながら、患者と外科医の両方が希望する手術結果を視覚化することを支援します。モーフ画像はしばしば術中に参照されますが、これらの参照画像は通常、紙に印刷されるかコンピュータ画面に表示されるという2次元(2D)形式で提示されます。これらの2D形式は、鼻の複雑な3次元(3D)解剖学的構造を過度に簡略化するだけでなく、外科医が術野から注意をそらす必要があるという問題もあります1,2。
拡張現実(AR)技術は、レンダリングされた3Dホログラフィック画像を外科医の視界に直接投影し、リアルタイムの空間的可視化を提供することで、これらの制限を解消できる可能性があります。ARはコンピュータ生成画像と現実世界の環境を組み合わせたものであり、術中の可視化を向上させ、外科的ワークフローを促進するために、顔面外傷の再建3,4、頭蓋顎顔面外科5、および小耳症の再建6などの顔面形成外科に応用されてきました。しかし、美容鼻形成術におけるARの応用は依然として限定的です。顔面外科および鼻形成術におけるARおよび混合現実技術の新たな応用について記述した最近の研究には、症例報告や小規模なケースシリーズが含まれています7,8,9,10。
先行研究において、我々は複合現実ヘッドマウントディスプレイ(Microsoft HoloLens 2; Microsoft Corporation, Redmond, WA, USA)を用い、遺体標本に対して2件のARガイド下鼻形成術を完遂しました。続いて、6名の患者を対象としたARガイド下美容鼻形成術の実現可能性に関する概念実証研究を行いました9。本プロトコルでは、術中のホログラフィックガイダンスのための視覚化プラットフォームとして、ヘッドマウント複合現実ディスプレイ(Apple Vision Pro; Apple Inc., Cupertino, CA, USA)を採用しています。以降、本デバイスをヘッドマウントディスプレイ(HMD)と表記します。本稿では、術中の視認性を向上させ、術前計画と術中の解剖学的構造との比較を容易にするために、美容鼻形成術のワークフローにARを統合するプロトコルを提示します。このARシステムは、自動レジストレーション機能を備えたARガイダンスシステムではなく、視覚的な参照として機能します。本プロトコルで述べる技術は、手術計画と術中視認性の両方に活用可能です。3Dホログラフィック画像は術中に手動で再配置できるため、ユーザー主導でAR体験をカスタマイズすることが可能です。
本プロトコルは、ヴァンダービルト大学医療センターの制度審査委員会(IRB承認番号#241657)のガイドラインに従って、ヴァンダービルト大学医療センターにて実施されました。すべての参加者は、術前のおよびモーフィングされた3Dホログラフィック画像の投影を促進するためのAR技術の術中利用への同意を含む、書面によるインフォームドコンセントを参加前に提供しました。すべての患者データは匿名化されました。患者は、フォトリアリスティックなレンダリング機能を備えた3D顔面イメージングシステムを用いた標準的な術前評価および写真撮影を受けました。組み入れ基準は、美容鼻形成術を受ける18歳以上の患者としました。
1. 3D写真キャプチャ

図1: 3次元顔面イメージングシステムのセットアップ。術前画像取得に使用した3次元顔面イメージングシステム。画像撮影前に、患者は直立して座り、頭部をフランクフルト平面に合わせてカメラシステムに向き合うように配置する。ここをクリックして、この図の拡大版を表示してください。

図2: 3次元画像取得時の患者のアライメント。画像キャプチャ前の正しい患者ポジショニングを示す代表的なアライメントインターフェース。標準化された3次元顔面画像の取得を確実にするため、すべてのカメラビューにおいて患者の目がリファレンスガイド内に配置されている必要があります。ここをクリックして、この図の拡大版を表示してください。

図3: 3次元顔面レンダリングおよびモーフィングインターフェース。術前の画像修正に使用される代表的な3次元顔面レンダリング環境。赤色の円は、ホログラム生成のために3次元モデルを書き出す前に、希望する美容的結果をシミュレーションするために使用される鼻形成術モーフィングツールを示している。この図の拡大版を表示するには、ここをクリックしてください。
2. 画像のモーフィング
3. 3D画像の書き出しとファイル変換
4. ヘッドマウントディスプレイ(HMD)の使用方法
注:手術室で使用する前に、HMDに慣れておいてください。手術中の中断を最小限に抑えるため、術前に執刀医と助手でHMDのテストを行ってください。

図 4: ヘッドマウントディスプレイの手術中での使用。美容鼻形成術において、患者個別のホログラフィックモデルを可視化するためにヘッドマウントディスプレイを使用した手術中の代表的な例。術者は手術計画および術中の評価において、手術野と比較するためにホログラフィックモデルを確認する。ここをクリックして、この図の拡大版を表示してください。
ARプロトコルは、美容鼻形成術のワークフローに正常に統合されました。ワークフローの代表的な段階を図 1、図2、図3、図4に示します。3D顔面イメージングシステムを用いて標準的な術前顔面画像を撮影し(図1)、一貫した画像取得を確実にするために、アライメントインターフェースに従って患者の位置決めを行いました(図2)。取得した画像はその後レンダリング環境にインポートされ、ホログラム生成用にエクスポートする前に、計画された美容的結果をシミュレーションするために術前顔面モデルの修正が行われました(図3)。
画像処理の後、モーフィング前後の3D顔モデルをホログラム閲覧アプリケーションを用いてHMDで表示しました。手術中、ホログラフィックモデルは手動で再配置、サイズ変更、回転が可能であり、患者の鼻とのリアルタイムな視覚的比較を、直接的な重ね合わせまたは隣接する視覚的参照として容易に行うことができました(図 4)。
HMDは最小限のトレーニングで、著者らの手術ワークフローに正常に組み込まれました。外科医からは、以前に使用していた視覚化システムと比較して、ディスプレイ解像度とインターフェースの応答性が向上したとの報告がありました。外科医を対象とした予備的なアンケート回答では、本システムが術中の手術進行度の評価および計画された美容的結果との比較に有用であることが示されました9。
全体として、本プロトコルは、術中の可視化および術前計画と術野との比較を容易にするために、美容鼻形成術にARを統合するための再現可能なワークフローを提示するものである。これらの知見は、HMDベースの可視化システムを美容鼻形成術のワークフローに組み込むことの実現可能性を支持している。本研究は、臨床的な有効性の評価ではなく、技術的なプロトコルと実現可能性に関するワークフローを記述したものであるが、本ワークフローに関連する客観的なアウトカム指標の調査が現在進行中である。
本原稿では、美容鼻形成術のワークフローにARを統合するためのプロトコルについて記述します。記述されたワークフローの実現可能性を裏付けるデータは、https://doi.org/10.1177/26893614261430605 で入手可能です。
先行研究により、美容鼻形成術におけるAR(拡張現実)使用の実現可能性が示されており、AR技術は統合が容易で、追加の手術時間は最小限であり、術者の認知負荷を軽減することが明らかになっています9。また、外科的応用において、ARは解剖学的理解を深め11、手術時間を短縮する12ことが報告されています。鼻形成術におけるAR研究では、術前計画の支援、手術精度の向上、および患者満足度の向上に対する本技術の潜在的可能性が強調されてきました7,8,9,10。本プロトコルでは、術中の可視化をサポートするために美容鼻形成術に組み込むことができる、代替的なHMD(ヘッドマウントディスプレイ)ベースのワークフローを記述することで、先行研究を拡張します。
本プロトコールでは、患者個別の術前3D画像および形態変化させた美容的目標画像を、術中のホログラフィック視覚リファレンスとして活用することを提案します。現在のAR技術は、従来の2Dリファレンス画像に加え、術中の外科的意思決定を支援し得る追加的な3D視点を提供することで、それらを補完することが可能です。このアプローチは、美容および再建の手術において患者個別の解剖学的構造の空間的把握が重要となる、顔面形成・再建外科において有用であると考えられます。
いくつかの制限事項に留意する必要があります。主なユーザー側の制限として、術者が術中に滅菌状態を維持し、またはスクラブ状態でいたい場合、術中のHMD使用には追加の人員が必要となる点が挙げられます。HMDの装着および取り外しを補助するために、助手の手術室への待機または近傍への配置が必須となります。さらに、本プロトコルで使用した特定のHMDは他のデバイスよりも重量があり、外部コードによる電源供給が必要なため、術者はポケット付きのスクラブを着用するか、HMDの使用中に助手にバッテリーパックを持ってもらう必要があります。また、AR機器の材料コストも高額です。本プロトコルで使用したHMDの最新モデルの価格は3699 USD13からであり、3D画像キャプチャシステムのコストは約25,000 USDとなります。
さらなる制限事項として、術中のホログラフィック参照画像の解釈が挙げられます。ホログラムは術者が手動でサイズ変更、再配置、および回転させるため、現在のプロトコルでは自動レジストレーション、トラッキング、サーフェスマッチング、ランドマークベースのアライメント、または患者固有のアンカリングについては記述していません。しかし、美容鼻形成術の目的においては、これらの機能は必ずしも必要ではない可能性があります。技術的には、現在のシステムは自動レジストレーションを備えたARシステムではなく、ウェアラブルな3D参照ディスプレイとして機能します。手動操作により、術者はホログラムを修正可能な視覚的参照として、患者の鼻に直接重ね合わせたり、隣接して配置したりすることが可能です。ホログラムをトラッキングまたはアンカリングして配置することは、固定されたオーバーレイとして術野を遮ってしまうか、あるいは術野に固定された場合に直接的な比較を妨げるため、不利に働く可能性があります。また、術中の浮腫、軟組織の変形、切開、組織操作、牽引、外科的展開、および進行性の腫脹によって、患者の術中解剖学的構造と、術前またはモーフィングされたホログラフィックモデルとの比較に影響が出る可能性があります。これらの要因はホログラフィック参照画像の解釈を変化させる可能性がありますが、従来の2D参照画像を使用する場合でも同様に存在します。経験豊富な術者であれば、参照画像の次元数に関わらず、これらの変数を認識し考慮できるはずです。このワークフローを研究するための他のアプローチとしては、従来の2D参照画像との比較、代替のHMDの使用、レジストレーション済みオーバーレイシステムの評価、患者固有のアンカリング手法の検討、または計画された美的結果と術後の結果の定量的比較などが考えられます。本論文は技術的な実現可能性に関するプロトコルを提示するものであり、定量的な検証は現在進行中です。3Dホログラフィック画像は、従来の画像と同様に、鼻形成術における美容的目標の術中可視化を拡張できますが、あくまで参照資料としてのみ意図されています。最終的な外科的意思決定は、術者の裁量に委ねられます。本プロトコルの利用者は、無菌性を維持し、患者の安全を最優先してください。適切に使用すれば、本システムが術野および患者に及ぼすリスクは最小限であると考えられます。本プロトコルの実験的な性質を考慮し、各患者に対して本技術のリスクとベネフィットについて説明し、術中のHMD使用前にインフォームドコンセントを得る必要があります。
これらの知見を検証するためにはさらなる研究が必要ですが、AR技術は美容鼻形成術において患者固有の3D参照画像へのアクセスを向上させることで、顔面形成・再建外科における有用な応用可能性を秘めていると考えられます。AR技術の導入が進むことで、顔面形成・再建外科におけるさらなる応用例が特定される可能性があります。本アプローチをさらに検証するためには、手術時間、精度、審美的結果、患者の安全性、およびワークフローの効率性などの客観的なアウトカムを評価する、将来的な多施設共同研究が必要です。
著者は開示すべき事項がないことを宣言します。
本研究は、米国国立衛生研究所(NIH)、国立聴覚・その他のコミュニケーション障害研究所(R25DC020728)、および国立がん研究所(NCI)のK08キャリア開発アワード(5K08CA293255-02)の支援を受けて行われました。また、ビデオ制作に貢献したShreeya Bahethi氏に感謝いたします。
| 名前 | 会社 | カタログ番号 | コメント |
|---|---|---|---|
| 3D解析モジュール | Canfield Scientific Inc. | N/A | 3次元画像ファイルのエクスポートに使用するVECTRA 3D Analysis Moduleソフトウェア。RRID: N/A |
| 3Dキャプチャモジュール | Canfield Scientific Inc. | N/A | 3次元顔画像の取得に使用するVECTRA Capture Moduleソフトウェア。RRID: N/A |
| 3D顔画像撮影システム | Canfield Scientific Inc. | N/A | 顔画像の取得に使用するVECTRA M3 3次元画像撮影システム。RRID: N/A |
| コンピューターワークステーション | Dell Inc. | W31C003 | 3次元顔画像撮影システムと共に使用するワークステーション。最小要件:Windows 11 (64-bit)、Intel Core i7以上、≥16 GB RAM、≥4 GBグラフィックスメモリ搭載の互換性のあるNVIDIAグラフィックスカード、およびUSB 2.0ポート2つ。Canfield Scientific Inc.により構成および提供。 |
| CADソフトウェア | Autodesk Inc. | N/A | 変換前の3次元モデルファイルの修復に使用するMeshmixerソフトウェア。RRID: SCR_015736 |
| CADソフトウェア(レガシー) | Microsoft Corporation | N/A | 3次元モデルファイルの修復に使用するMicrosoft 3D Builderソフトウェア(非推奨、オプションの代替品)。 |
| フェイシャルモーフィングソフトウェア | Canfield Scientific Inc. | N/A | 手術計画のための目的とする美容シミュレーションを生成するために使用するFace Sculptorソフトウェア。RRID: N/A |
| ヘッドマウントディスプレイ | Apple Inc. | N/A | 術中可視化に使用するApple Vision Pro (M2) ミクストリアリティヘッドセット。RRID: N/A |
| ホログラム管理プラットフォーム | ApoQlar Medical | N/A | 可視化前のホログラフィックモデルのアップロードおよび管理に使用するHoloMedicine Online Previewアプリケーション。RRID: N/A |
| ホログラム閲覧アプリケーション | ApoQlar Medical | N/A | ヘッドマウントディスプレイ内でホログラフィックモデルを可視化するために使用するVSI HoloMedicine Previewアプリケーション。RRID: N/A |
| オープンソース3Dモデリングソフトウェア | Blender Development Team | Version 4.4 | 3次元モデルの.glb形式への変換およびメッシュの削減に使用するBlenderソフトウェア。RRID: SCR_008606 |
この記事は公開されました
動画は近日公開