본 프로토콜은 수술 중 시각화를 개선하고 수술적 의사결정을 돕기 위해 증강 현실과 3차원 홀로그래픽 이미징을 미용 코 성형술 워크플로우에 통합하는 방법을 설명합니다.
본 프로토콜은 수술 중 시각화를 개선하고 수술적 의사결정을 돕기 위해 증강 현실과 3차원 홀로그래픽 이미징을 미용 코 성형술 워크플로우에 통합하는 방법을 설명합니다.
미용 코 성형술은 환자가 원하는 미적 결과를 달성하기 위해 수술 중 참조 이미지에 의존하는 경우가 많습니다. 그러나 이러한 이미지들은 일반적으로 2차원(2D) 형식으로 표시되는데, 이는 3차원(3D) 비강 해부학적 구조를 지나치게 단순화하며 외과의가 수술 부위에서 시선을 돌려야 한다는 단점이 있습니다. 증강 현실(AR) 기술은 환자 맞춤형 3D 홀로그램 이미지를 외과의의 시야에 투영하여 실시간 공간 시각화를 제공함으로써 이러한 한계를 해결할 수 있습니다. 본 논문은 3D 안면 영상 시스템과 헤드 마운트형 혼합 현실 디스플레이를 사용하여 미용 코 성형술 워크플로우에 AR을 통합하는 프로토콜을 설명합니다. 수술 전 3D 안면 영상을 획득하고, 환자와 협력하여 원하는 수술 결과를 나타내도록 변형(morphing)한 뒤, 이를 홀로그램 모델로 내보내 수술 중 수술 부위와 시각적으로 비교할 수 있도록 표시합니다. 이 프로토콜은 수술 워크플로우에 성공적으로 통합되어 외과의가 수술 전 계획 및 수술 중 평가 단계에서 실제 공간 내의 홀로그램 모델을 조작할 수 있게 하였습니다. 본 프로토콜은 미용 코 성형술에 AR을 도입하기 위한 재현 가능한 워크플로우를 제공하며, 수술 중 시각화를 개선하고 수술적 의사결정을 지원하며 수술 전 계획과 수술 중 해부학적 구조 간의 비교를 용이하게 할 수 있습니다.
환자와의 수술 전 공유 의사결정은 미용 코 성형술의 핵심 요소이며, 시술에 대한 환자의 목표를 이해하는 동시에 잠재적인 미용적 결과를 시뮬레이션하는 과정을 포함합니다. 사진 시뮬레이션은 환자와 외과 의사 모두가 원하는 수술 결과를 시각화하고, 현실적으로 달성 가능한 범위를 소통하는 데 도움을 줍니다. 변형된 이미지는 수술 중에 자주 참조되지만, 이러한 참조 이미지는 일반적으로 종이에 인쇄되거나 컴퓨터 화면에 표시되는 2차원(2D) 형식으로 제공됩니다. 이러한 2D 형식은 코의 복잡한 3차원(3D) 해부학적 구조를 지나치게 단순화할 뿐만 아니라, 외과 의사가 수술 부위에서 주의를 돌려야 한다는 단점이 있습니다1,2.
증강 현실(AR) 기술은 렌더링된 3D 홀로그램 이미지를 외과의의 시야에 직접 투영하여 실시간 공간 시각화를 제공함으로써 이러한 한계점을 해결할 수 있습니다. AR은 컴퓨터 생성 이미지와 실제 환경을 결합하며, 안면 외상 재건3,4, 두개안면 외과 수술5, 그리고 소이증 재건술6 등의 안면 성형외과 영역에 적용되어 수술 중 시각화를 개선하고 수술 워크플로우를 원활하게 했습니다. 그러나 미용 코 성형술에서의 AR 적용은 여전히 제한적입니다. 안면 수술 및 코 성형술에서 AR 및 혼합 현실 기술의 최신 응용 사례를 설명하는 최근 연구들은 대부분 증례 보고나 소규모 증례 시리즈 형태입니다7,8,9,10.
이전 연구에서 본 연구진은 혼합 현실 헤드 마운트 디스플레이(Microsoft HoloLens 2; Microsoft Corporation, Redmond, WA, USA)를 사용하여 카다버 표본에 대해 두 건의 AR 유도 코 성형술을 성공적으로 완료했습니다. 이후 6명의 환자를 대상으로 AR 유도 미용 코 성형술의 타당성을 확인하는 개념 증명 연구를 수행했습니다9. 본 프로토콜에서는 수술 중 홀로그램 가이드를 위한 시각화 플랫폼으로 헤드 마운트 혼합 현실 디스플레이(Apple Vision Pro; Apple Inc., Cupertino, CA, USA)를 사용합니다. 이후 본 장치는 헤드 마운트 디스플레이(HMD)로 지칭합니다. 본 논문에서는 수술 중 시각화를 개선하고 수술 전 계획과 수술 중 해부학적 구조 간의 비교를 용이하게 하기 위해 AR을 미용 코 성형술 워크플로우에 통합하는 프로토콜을 제시합니다. 이 AR 시스템은 자동 등록 기능이 있는 AR 가이드 시스템이라기보다 시각적 참조 도구의 역할을 합니다. 본 프로토콜에 기술된 기술은 수술 계획과 수술 중 시각화 모두에 사용할 수 있습니다. 3D 홀로그램 이미지는 수술 중에 수동으로 위치를 재조정할 수 있어, 사용자가 AR 경험을 직접 맞춤 설정할 수 있습니다.
본 프로토콜은 Vanderbilt University Medical Center 기관 생명윤리위원회(IRB 승인 번호 #241657)의 가이드라인에 따라 Vanderbilt University Medical Center에서 수행되었습니다. 모든 참여자는 참여 전 서면 동의서를 제출하였으며, 여기에는 수술 전 및 변형된 3D 홀로그램 이미지의 투영을 돕기 위한 AR 기술의 수술 중 사용에 대한 동의가 포함되었습니다. 모든 환자 데이터는 비식별화 처리되었습니다. 환자들은 광사실적 렌더링 기능이 있는 3D 안면 이미징 시스템을 사용하여 표준 수술 전 평가 및 사진 촬영을 거쳤습니다. 선정 기준은 미용 코 성형술을 받는 18세 이상의 환자로 하였습니다.
1. 3D 사진 캡처

그림 1: 3차원 안면 영상 시스템 구성. 수술 전 영상 획득에 사용된 3차원 안면 영상 시스템. 환자는 상체를 곧게 세워 앉아 카메라 시스템을 마주 보아야 하며, 영상 캡처 전 머리를 프랑크푸르트 수평면(Frankfurt horizontal plane)에 맞춰 정렬해야 한다. 여기를 클릭하여 이 그림의 확대 버전을 확인하십시오.

그림 2: 3차원 영상 획득 중 환자 정렬. 영상 캡처 전 올바른 환자 배치를 보여주는 대표적인 정렬 인터페이스. 표준화된 3차원 안면 영상 획득을 위해 모든 카메라 뷰의 참조 가이드 내에 환자의 눈이 정렬되어야 합니다. 이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오.

그림 3: 3차원 얼굴 렌더링 및 모핑 인터페이스. 수술 전 이미지 수정에 사용되는 대표적인 3차원 얼굴 렌더링 환경이다. 빨간색 원은 홀로그램 생성을 위해 3차원 모델을 내보내기 전, 원하는 미용적 결과를 시뮬레이션하는 데 사용되는 코성형 모핑 도구를 나타낸다. 여기를 클릭하여 이 그림의 더 큰 버전을 확인하십시오.
2. 이미지 모핑
3. 3D 이미지 내보내기 및 파일 변환
4. 헤드 마운트 디스플레이(HMD) 사용법
참고: 수술실에서 사용하기 전에 HMD 사용법에 익숙해지십시오. 수술 중 중단을 최소화하기 위해 시술 전 집도의와 보조의 모두 HMD를 테스트하십시오.

그림 4: 헤드 마운트 디스플레이의 수술 중 사용. 미용 코 성형술 중 환자 맞춤형 홀로그램 모델의 시각화를 위해 헤드 마운트 디스플레이를 사용한 대표적인 수술 사례. 외과의는 수술 계획 및 수술 중 평가 단계에서 홀로그램 모델을 검토하여 수술 부위와 비교한다. 이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오.
AR 프로토콜이 미용 코 성형 워크플로우에 성공적으로 통합되었습니다. 워크플로우의 대표적인 단계들이 그림 1, 그림 2, 그림 3, 그림 4에 예시되어 있습니다. 표준화된 수술 전 안면 영상을 획득하기 위해 3D 안면 영상 시스템이 사용되었으며(그림 1), 일관된 영상 획득을 보장하기 위해 정렬 인터페이스를 통해 환자의 자세를 안내하였습니다(그림 2). 획득한 영상은 이후 렌더링 환경으로 가져왔으며, 여기서 홀로그램 생성을 위해 내보내기 전 계획된 미용적 결과를 시뮬레이션하도록 수술 전 안면 모델을 수정하였습니다(그림 3).
이미지 처리 후, 변형 전후의 3D 얼굴 모델을 홀로그램 뷰잉 애플리케이션을 통해 HMD로 표시하였습니다. 수술 중에 홀로그램 모델을 수동으로 재배치, 크기 조절 및 회전시켜, 환자의 코와 직접 겹쳐 보거나 인접한 시각적 참조물로 활용함으로써 실시간 시각적 비교가 가능하도록 하였습니다(그림 4).
HMD는 최소한의 교육만으로 저자들의 수술 워크플로우에 성공적으로 통합되었습니다. 외과의들은 이전에 사용했던 시각화 시스템에 비해 디스플레이 해상도와 인터페이스 응답성이 향상되었다고 보고했습니다. 예비 외과의 설문 조사 결과, 해당 시스템이 수술 진행 상황의 수술 중 평가 및 계획된 미용적 결과와의 비교에 유용하다는 점이 나타났습니다9.
종합적으로, 본 프로토콜은 수술 중 시각화를 용이하게 하고 수술 전 계획과 수술 필드 간의 비교를 돕기 위해 미용 코 성형술에 AR을 통합하는 재현 가능한 워크플로우를 보여줍니다. 이러한 관찰 결과는 HMD 기반 시각화 시스템을 미용 코 성형술 워크플로우에 도입하는 것이 가능함을 뒷받침합니다. 본 연구는 임상적 효능 평가보다는 기술적 프로토콜과 타당성 워크플로우를 설명하며, 현재 이 워크플로우와 관련된 객관적 결과 측정 지표에 대한 조사가 진행 중입니다.
본 원고는 미용 코 성형 수술 워크플로우에 AR을 통합하는 프로토콜을 설명합니다. 설명된 워크플로우의 타당성을 뒷받침하는 데이터는 https://doi.org/10.1177/26893614261430605에서 확인할 수 있습니다.
이전 연구에서는 미용 코 성형술 중 AR 사용의 가능성을 입증하였으며, AR 기술이 통합하기 쉽고 추가 수술 시간이 최소한으로 소요되며 외과의의 인지 부하를 줄여준다는 것을 발견했습니다9. 또한 AR은 수술 적용 시 해부학적 이해를 높이고11 수술 시간을 단축하는 것으로 보고되었습니다12. 코 성형술의 경우, AR 연구들은 수술 전 계획을 돕고 수술 정밀도를 높이며 환자 만족도를 향상시킬 수 있는 이 기술의 잠재력을 강조해 왔습니다7,8,9,10. 본 프로토콜은 수술 중 시각화를 지원하기 위해 미용 코 성형술에 통합할 수 있는 대안적인 HMD 기반 워크플로우를 설명함으로써 이전 연구를 확장합니다.
본 프로토콜은 환자 맞춤형 3D 수술 전 영상 및 변형된 미용 목표 영상을 수술 중 홀로그래픽 시각 참조물로 사용하는 방법을 제안합니다. 현재의 AR 기술은 수술 중 외과적 의사결정에 도움을 줄 수 있는 추가적인 3D 관점을 제공함으로써 전통적인 2D 참조 영상을 보완할 수 있습니다. 이러한 접근 방식은 미용 및 재건 절차 동안 환자 맞춤형 해부학적 구조에 대한 공간적 이해가 중요한 안면 성형 및 재건 수술에서 유용하게 활용될 수 있습니다.
몇 가지 제한 사항을 유의해야 합니다. 주요 사용자 제한 사항은 외과의가 수술 중에 멸균 상태를 유지하거나 스크럽 상태를 유지하고자 할 경우, 수술 중 HMD 사용을 위해 추가 인력이 필요하다는 점입니다. 보조자가 수술실 내부 또는 근처에 머물며 HMD의 착용과 탈거를 도와야 합니다. 또한, 본 프로토콜에 사용된 특정 HMD는 다른 장치보다 무겁고, 외부 유선 전원 공급 장치를 사용하므로 외과의가 주머니가 있는 스크럽복을 입거나 보조자가 HMD 사용 중에 배터리 팩을 잡고 있어야 합니다. AR 장비의 재료 비용 또한 높습니다. 본 프로토콜에서 사용된 HMD 최신 모델의 가격은 $3699 USD13부터 시작하며, 3D 이미지 캡처 시스템의 비용은 약 $25,000입니다.
추가적인 제한 사항은 홀로그램 참조 이미지의 수술 중 해석과 관련이 있습니다. 홀로그램은 외과 의사에 의해 수동으로 크기가 조정되고 위치가 변경되며 회전되며, 현재 프로토콜에는 자동 등록, 추적, 표면 매칭, 랜드마크 기반 정렬 또는 환자 맞춤형 앵커링에 대한 설명이 포함되어 있지 않습니다. 하지만 미용 코 성형술의 목적을 위해서는 이러한 기능들이 필요하지 않을 수 있습니다. 기술적으로 현재 시스템은 자동 등록 기능이 있는 AR 시스템이라기보다 착용형 3D 참조 디스플레이로 작동합니다. 수동 조작을 통해 외과 의사는 홀로그램을 환자의 코 위에 직접 겹치거나 인접하게 배치하여 수정 가능한 시각적 참조물로 사용할 수 있습니다. 홀로그램의 추적 또는 앵커링 기반 배치는 고정된 오버레이로서 수술 부위를 가리거나, 수술 부위에 고정되었을 때 직접적인 비교를 방해하여 불리할 수 있습니다. 수술 중 부종, 연조직 변형, 절개, 조직 조작, 견인, 수술적 노출 및 점진적인 부종 또한 환자의 수술 중 해부학적 구조와 수술 전 또는 변형된 홀로그램 모델 간의 비교에 영향을 줄 수 있습니다. 이러한 요인들이 홀로그램 참조 이미지의 해석을 변화시킬 수 있지만, 이는 전통적인 2D 참조 이미지를 사용할 때도 마찬가지로 나타납니다. 숙련된 외과 의사라면 참조 이미지의 차원과 관계없이 이러한 변수들을 인식하고 고려할 수 있어야 합니다. 이 워크플로우를 연구하는 다른 접근 방식으로는 전통적인 2D 참조 이미지와의 비교, 다른 HMD의 사용, 등록된 오버레이 시스템의 평가, 환자 맞춤형 앵커링 방법의 평가 또는 계획된 결과와 수술 후 심미적 결과의 정량적 비교 등이 포함될 수 있습니다. 본 원고는 기술적 타당성 프로토콜을 제시하며, 정량적 검증은 현재 진행 중입니다. 3D 홀로그램 이미지는 전통적인 이미지와 마찬가지로 코 성형술에서 미용적 목표의 수술 중 시각화를 증강할 수 있지만, 오직 참조 자료로만 사용되도록 고안되었습니다. 최종적인 수술적 의사결정은 전적으로 외과 의사의 재량에 달려 있습니다. 이 프로토콜의 사용자는 멸균 상태를 유지하고 환자의 안전을 최우선으로 해야 합니다. 적절하게 사용될 때, 이 시스템은 수술 부위와 환자에게 최소한의 위험만을 초래해야 합니다. 본 프로토콜의 실험적 성격을 고려하여, 각 환자에게 기술의 위험성과 이점에 대해 상담해야 하며, 수술 중 HMD 사용 전에 고지된 동의를 얻어야 합니다.
이러한 발견을 검증하기 위해 추가적인 연구가 필요하지만, AR 기술은 미용 코 성형술 중 환자 맞춤형 3D 참조 이미지에 대한 접근성을 향상시킴으로써 안면 성형 및 재건 외과 분야에서 잠재적인 응용 가능성을 가질 수 있습니다. AR 기술의 도입이 확대됨에 따라 안면 성형 및 재건 외과에서의 추가적인 응용 분야가 확인될 수 있을 것입니다. 수술 시간, 정확도, 미적 결과, 환자 안전 및 워크플로우 효율성과 같은 객관적 결과를 평가하는 향후 다기관 연구를 통해 이 접근 방식을 더욱 검증하는 것이 필요합니다.
저자들은 공개할 사항이 없음을 밝힙니다.
본 연구는 미국 국립보건원(NIH), 국립청각 및 기타 의사소통 장애 연구소(R25DC020728) 및 국립암연구소(NCI) K08 경력 개발 보조금(5K08CA293255-02)의 지원을 받았습니다. 저자들은 영상 제작에 기여한 Shreeya Bahethi에게 감사를 표합니다.
| 이름 | 회사 | 카탈로그 번호 | 댓글 |
|---|---|---|---|
| 3D 분석 모듈 | Canfield Scientific Inc. | N/A | 3차원 이미지 파일 내보내기에 사용되는 VECTRA 3D Analysis Module 소프트웨어. RRID: N/A |
| 3D 캡처 모듈 | Canfield Scientific Inc. | N/A | 3차원 안면 이미지 획득에 사용되는 VECTRA Capture Module 소프트웨어. RRID: N/A |
| 3D 안면 영상 시스템 | Canfield Scientific Inc. | N/A | 안면 이미지 획득에 사용되는 VECTRA M3 3차원 영상 시스템. RRID: N/A |
| 컴퓨터 워크스테이션 | Dell Inc. | W31C003 | 3차원 안면 영상 시스템과 함께 사용되는 워크스테이션. 최소 사양: Windows 11 (64-bit), Intel Core i7 이상, ≥16 GB RAM, ≥4 GB 그래픽 메모리가 탑재된 호환 NVIDIA 그래픽 카드 및 USB 2.0 포트 2개. Canfield Scientific Inc.에서 구성 및 공급함. |
| 컴퓨터 보조 설계 소프트웨어 | Autodesk Inc. | N/A | 변환 전 3차원 모델 파일 수정에 사용되는 Meshmixer 소프트웨어. RRID: SCR_015736 |
| 컴퓨터 보조 설계 소프트웨어 (기존) | Microsoft Corporation | N/A | 3차원 모델 파일 수정에 사용되는 Microsoft 3D Builder 소프트웨어 (더 이상 사용되지 않음; 선택적 대안). |
| 안면 모핑 소프트웨어 | Canfield Scientific Inc. | N/A | 수술 계획을 위한 원하는 미용 시뮬레이션 생성에 사용되는 Face Sculptor 소프트웨어. RRID: N/A |
| 머리 장착형 디스플레이 | Apple Inc. | N/A | 수술 중 시각화에 사용되는 Apple Vision Pro (M2) 혼합 현실 헤드셋. RRID: N/A |
| 홀로그램 관리 플랫폼 | ApoQlar Medical | N/A | 시각화 전 홀로그램 모델 업로드 및 관리에 사용되는 HoloMedicine Online Preview 애플리케이션. RRID: N/A |
| 홀로그램 뷰어 애플리케이션 | ApoQlar Medical | N/A | 머리 장착형 디스플레이 내에서 홀로그램 모델을 시각화하는 데 사용되는 VSI HoloMedicine Preview 애플리케이션. RRID: N/A |
| 오픈 소스 3차원 모델링 소프트웨어 | Blender Development Team | Version 4.4 | 3차원 모델의 .glb 형식 변환 및 메쉬 데시메이션(mesh decimation)에 사용되는 Blender 소프트웨어. RRID: SCR_008606 |
이 논문이 게재되었습니다
동영상 곧 제공