Bu protokol, intraoperatif görselleştirmeyi artırmak ve cerrahi karar verme sürecini kolaylaştırmak amacıyla, artırılmış gerçeklik ve üç boyutlu holografik görüntülemenin kozmetik rinoplasti iş akışına entegrasyonunu açıklamaktadır.
Yöntem makalesi
Bu protokol, intraoperatif görselleştirmeyi artırmak ve cerrahi karar verme sürecini kolaylaştırmak amacıyla, artırılmış gerçeklik ve üç boyutlu holografik görüntülemenin kozmetik rinoplasti iş akışına entegrasyonunu açıklamaktadır.
Kozmetik rinoplasti, hastanın arzuladığı estetik sonucu elde etmeye yardımcı olmak için genellikle ameliyat sırasındaki referans görüntülere dayanır. Ancak bu görüntüler tipik olarak iki boyutlu (2D) formatta görüntülenir; bu durum üç boyutlu (3D) burun anatomisini aşırı derecede basitleştirir ve cerrahın dikkatini operasyon alanından uzaklaştırmasını gerektirir. Artırılmış gerçeklik (AR) teknolojisi, hastaya özgü 3D holografik görüntüleri cerrahın görüş alanına yansıtarak gerçek zamanlı uzamsal görselleştirme sağlayıp bu kısıtlamaları giderebilir. Bu makale, 3D yüz görüntüleme sistemi ve başa takılan karma gerçeklik ekranı kullanarak AR'nin kozmetik rinoplasti iş akışına entegrasyonu için bir protokol tanımlamaktadır. Ameliyat öncesi 3D yüz görüntüleri alınır, arzulanan cerrahi sonucu temsil etmek üzere hasta ile birlikte ortaklaşa morflanır, holografik modeller olarak dışa aktarılır ve cerrahi alanla görsel karşılaştırma yapmak amacıyla ameliyat sırasında görüntülenir. Protokol, cerrahların ameliyat öncesi planlama ve ameliyat sırasındaki değerlendirme sırasında holografik modelleri gerçek uzayda manipüle etmelerine olanak tanıyarak cerrahi iş akışına başarıyla dahil edilmiştir. Bu protokol, AR'nin kozmetik rinoplastiye dahil edilmesi için tekrarlanabilir bir iş akışı sunmakta olup, ameliyat sırasındaki görselleştirmeyi artırabilir, cerrahi karar verme sürecini destekleyebilir ve ameliyat öncesi planlama ile ameliyat sırasındaki anatomi arasındaki karşılaştırmayı kolaylaştırabilir.
Hastalarla ameliyat öncesi paylaşılan karar verme süreci, kozmetik rinoplastinin temel bir bileşenidir ve prosedüre yönelik hasta hedeflerini anlamanın yanı sıra potansiyel kozmetik sonuçların simüle edilmesini içerir. Foto simülasyon, gerçekçi olarak nelerin başarılabileceği iletiliyorken, hem hastaların hem de cerrahların istenen cerrahi sonucu görselleştirmelerine yardımcı olur. Morflanmış görüntülere genellikle ameliyat sırasında başvurulur; ancak bu referans görüntüler tipik olarak, ya kağıda basılı ya da bir bilgisayar ekranında görüntülenen iki boyutlu (2D) formatta sunulur. Bu 2D formatlar, burnun karmaşık üç boyutlu (3D) anatomisini aşırı basitleştirmekle kalmaz, aynı zamanda cerrahın dikkatini operasyon alanından uzaklaştırmasını gerektirir1,2.
Artırılmış gerçeklik (AR) teknolojisi, oluşturulan 3B holografik görüntüleri doğrudan cerrahın görüş alanına yansıtarak gerçek zamanlı uzamsal görselleştirme sağlayıp bu kısıtlamaları giderebilir. Bilgisayar tarafından oluşturulan görüntüleri gerçek dünya ortamıyla birleştiren AR; intraoperatif görselleştirmeyi iyileştirmek ve cerrahi iş akışını kolaylaştırmak amacıyla yüz travma rekonstrüksiyonu3,4, kraniofasiyal cerrahi5 ve mikrotia rekonstrüksiyonunda6 uygulanmıştır. Bununla birlikte, AR'nin kozmetik rinoplastideki uygulamaları hala sınırlıdır. Yüz cerrahisi ve rinoplastide AR ve karma gerçeklik teknolojilerinin gelişmekte olan uygulamalarını tanımlayan güncel çalışmalar, vaka raporlarını ve küçük vaka serilerini7,8,9,10 içermektedir.
Önceki bir çalışmada, karma gerçeklik destekli bir baş üstü ekran (Microsoft HoloLens 2; Microsoft Corporation, Redmond, WA, USA) kullanarak kadavra örnekleri üzerinde iki başarılı AR kılavuzlu rinoplasti gerçekleştirdik. Bunu, altı hastanın yer aldığı, kavram kanıtlama amaçlı bir AR kılavuzlu kozmetik rinoplasti fizibilite çalışması takip etti9. Mevcut protokolde, intraoperatif holografik kılavuzluk için görselleştirme platformu olarak baş üstü bir karma gerçeklik ekranı (Apple Vision Pro; Apple Inc., Cupertino, CA, USA) kullanmaktayız. Bu cihaza yapılan sonraki atıflar baş üstü ekran (HMD) olarak tanımlanmıştır. Burada, intraoperatif görselleştirmeyi artırmak ve preoperatif planlama ile intraoperatif anatomi arasındaki karşılaştırmayı kolaylaştırmak amacıyla AR'nin kozmetik rinoplasti iş akışına entegre edilmesine yönelik bir protokol sunmaktayız. Bu AR sistemi, otomatik kayıt özellikli bir AR kılavuzluk sisteminden ziyade görsel bir referans görevi görür. Bu protokolde açıklanan teknoloji, hem cerrahi planlama hem de intraoperatif görselleştirme için kullanılabilir. 3D holografik görüntüler intraoperatif olarak manuel olarak yeniden konumlandırılabilir, bu da AR deneyiminin kullanıcı tarafından yönlendirilen özelleştirmesine olanak tanır.
Bu protokol, Vanderbilt University Medical Center Kurumsal İnceleme Kurulu'nun kılavuzlarına uygun olarak Vanderbilt University Medical Center'da gerçekleştirilmiştir (IRB onay #241657). Tüm katılımcılar, ameliyat öncesi ve morflanmış 3D holografik görüntülerin projeksiyonunu kolaylaştırmak için intraoperatif AR teknolojisi kullanımına verilen onay da dahil olmak üzere, katılım öncesinde yazılı bilgilendirilmiş onam vermiştir. Tüm hasta verileri anonimleştirilmiştir. Hastalar, fotorealistik renderleme yeteneklerine sahip bir 3D yüz görüntüleme sistemi kullanılarak standart ameliyat öncesi değerlendirmeye ve fotoğraf çekimine tabi tutulmuştur. Dahil edilme kriterleri, kozmetik rinoplasti ameliyatı geçiren 18 yaş ve üzeri hastalardır.
1. 3B Fotoğraf Yakalama

Şekil 1: Üç boyutlu yüz görüntüleme sistemi kurulumu. Preoperatif görüntüleme için kullanılan üç boyutlu yüz görüntüleme sistemi. Görüntü alımı öncesinde hasta dik oturmalı, yüzü kamera sistemine dönük olmalı ve başı Frankfurt yatay düzlemiyle hizalanmalıdır. Bu şeklin daha büyük bir versiyonunu görüntülemek için lütfen buraya tıklayın.

Şekil 2: Üç boyutlu görüntü alımı sırasında hasta hizalaması. Görüntü yakalama öncesinde doğru hasta konumlandırmasını gösteren temsili hizalama arayüzü. Standartlaştırılmış üç boyutlu yüz görüntüsü alımını sağlamak için hastanın gözleri tüm kamera görünümlerinde referans kılavuzlar içinde hizalanmalıdır. Bu şeklin daha büyük bir versiyonunu görüntülemek için lütfen buraya tıklayın.

Şekil 3: Üç boyutlu yüz oluşturma ve morphing arayüzü. Ameliyat öncesi görüntü modifikasyonu için kullanılan temsili üç boyutlu yüz oluşturma ortamı. Kırmızı daire, üç boyutlu model hologram üretimi için dışa aktarılmadan önce istenen kozmetik sonucu simüle etmek amacıyla kullanılan rinoplasti morphing aracını göstermektedir. Bu şeklin daha büyük bir versiyonunu görüntülemek için lütfen buraya tıklayın.
2. Görüntünün Morflanması
3. 3B Görüntü Aktarımı ve Dosya Dönüştürme
4. Başa Takılan Ekranın (HMD) Kullanımı
NOT: Ameliyathanede kullanmadan önce HMD'ye aşina olun. Cerrahi sırasında kesintileri en aza indirmek için prosedürden önce HMD'yi hem cerrah hem de asistan ile birlikte test edin.

Şekil 4: Kafaye monte ekranın intraoperatif kullanımı.Kozmetik rinoplasti sırasında hastaya özel holografik modellerin görselleştirilmesi için kafaye monte ekranın tipik intraoperatif kullanımı. Cerrah, cerrahi planlama ve intraoperatif değerlendirme sırasında operasyon alanı ile karşılaştırmak için holografik modelleri inceler. Bu şeklin daha büyük bir versiyonunu görüntülemek için lütfen buraya tıklayın.
AR protokolü, kozmetik rinoplasti iş akışına başarıyla entegre edilmiştir. İş akışının temsili aşamaları Şekil 1, Şekil 2, Şekil 3, Şekil 4'te gösterilmiştir. Standart ameliyat öncesi yüz görüntülerini elde etmek için 3B yüz görüntüleme sistemi kullanılmış (Şekil 1), tutarlı görüntü alımı sağlamak amacıyla hasta konumlandırması hizalama arayüzü ile yönlendirilmiştir (Şekil 2). Elde edilen görüntüler daha sonra render ortamına aktarılmış ve hologram üretimi için dışa aktarılmadan önce planlanan kozmetik sonucu simüle etmek amacıyla ameliyat öncesi yüz modelleri üzerinde düzenlemeler yapılmıştır (Şekil 3).
Görüntü işlemenin ardından, değiştirilmemiş ve değiştirilmiş 3D yüz modelleri, bir hologram görüntüleme uygulaması aracılığıyla HMD kullanılarak görüntülendi. Cerrahi sırasında holografik modeller, hastanın burnuyla gerçek zamanlı görsel karşılaştırmayı kolaylaştırmak için, ya doğrudan üst üste bindirme ya da yan yana görsel referans şeklinde manuel olarak yeniden konumlandırılabilir, yeniden boyutlandırılabilir ve döndürülebilirdi (Şekil 4).
HMD, minimum eğitimle yazarların cerrahi iş akışına başarıyla entegre edilmiştir. Cerrahlar, daha önce kullanılan görselleştirme sistemine kıyasla görüntü çözünürlüğünün ve arayüz tepkiselliğinin arttığını bildirmişlerdir. Ön cerrah anket yanıtları, sistemin intraoperatif cerrahi ilerlemenin değerlendirilmesi ve planlanan kozmetik sonuçla karşılaştırılması için faydalı olduğunu göstermiştir9.
Genel olarak bu protokol, intraoperatif görselleştirmeyi kolaylaştırmak ve preoperatif planlama ile operasyon alanı arasında karşılaştırma yapmak amacıyla kozmetik rinoplastiye AR entegrasyonu için tekrarlanabilir bir iş akışı sunmaktadır. Bu gözlemler, HMD tabanlı bir görselleştirme sisteminin kozmetik rinoplasti iş akışına dahil edilmesinin uygulanabilirliğini desteklemektedir. Mevcut çalışma, klinik bir etkinlik değerlendirmesinden ziyade teknik bir protokol ve uygulanabilirlik iş akışını tanımlamaktadır; ancak, bu iş akışıyla ilişkili objektif sonuç ölçümlerinin araştırılması halihazırda devam etmektedir.
Bu makale, kozmetik rinoplasti iş akışına AR entegrasyonu için bir protokol tanımlamaktadır. Tanımlanan iş akışının uygulanabilirliğini destekleyen veriler şu adreste mevcuttur: https://doi.org/10.1177/26893614261430605.
Önceki bir çalışma, kozmetik rinoplasti sırasında AR kullanımının fizibilitesini kanıtlamış; AR teknolojisinin entegrasyonunun kolay olduğunu, minimum ek operasyon süresi gerektirdiğini ve cerrahın bilişsel yükünü azalttığını ortaya koymuştur9. AR'nin cerrahi uygulamalarda anatomik anlayışı artırdığı11 ve operasyon süresini kısalttığı12 bildirilmiştir. Rinoplasti alanındaki AR çalışmaları, teknolojinin ameliyat öncesi planlamaya yardımcı olma, cerrahi hassasiyeti artırma ve hasta memnuniyetini geliştirme potansiyelini vurgulamıştır7,8,9,10. Mevcut protokol, intraoperatif görselleştirmeyi desteklemek amacıyla kozmetik rinoplastiye dahil edilebilecek alternatif bir HMD tabanlı iş akışını tanımlayarak önceki araştırmaları genişletmektedir.
Bu protokol, hastaya özgü 3B preoperatif ve morflanmış kozmetik hedef görüntülerin intraoperatif holografik görsel referanslar olarak kullanılmasını önermektedir. Mevcut AR teknolojisi, intraoperatif cerrahi karar verme sürecine yardımcı olabilecek ek 3B perspektifler sağlayarak geleneksel 2B referans görüntüleri tamamlayabilir. Bu yaklaşım, kozmetik ve rekonstrüktif prosedürler sırasında hastaya özgü anatominin uzamsal olarak anlaşılmasının önemli olduğu yüz plastik ve rekonstrüktif cerrahisinde yararlı olabilir.
Bazı sınırlamalara dikkat edilmelidir. Temel kullanıcı sınırlaması, cerrahın prosedür sırasında steril kalmak veya steril önlük giymiş olmak istemesi durumunda, intraoperatif HMD kullanımının ek personel gerektirmesidir. HMD'nin giyilmesine ve çıkarılmasına yardımcı olmak için bir asistanın ameliyathanede veya yakınında bulunması gerekir. Ayrıca, bu spesifik HMD diğer cihazlardan daha ağırdır ve harici kablolu güç kaynağı, HMD kullanımı sırasında cerrahın cepli scrubs giymesini veya bir asistanın batarya paketini tutmasını gerektirir. AR ekipmanlarının malzeme maliyeti de yüksektir. Bu protokolde kullanılan HMD'nin en son modelinin fiyatı 3699 USD'den13 başlarken, 3D görüntü yakalama sisteminin maliyeti yaklaşık 25.000 USD'dir.
Ek sınırlamalar, holografik referans görüntülerinin ameliyat sırasındaki yorumlanmasıyla ilgilidir. Hologramlar cerrah tarafından manuel olarak yeniden boyutlandırılır, yeniden konumlandırılır ve döndürülür; mevcut protokol otomatik kayıt, izleme, yüzey eşleme, işaretleyici tabanlı hizalama veya hastaya özgü sabitleme işlemlerini tanımlamamaktadır. Bununla birlikte, bu özellikler kozmetik rinoplasti amaçları için gerekli olmayabilir. Teknik olarak mevcut sistem, otomatik kayıt özelliğine sahip bir AR sisteminden ziyade, giyilebilir bir 3D referans ekranı olarak işlev görür. Manuel manipülasyon, cerrahın hologramları değiştirilebilir bir görsel referans olarak doğrudan hastanın burnunun üzerine bindirmesine veya burnun yanına konumlandırmasına olanak tanır. Hologramların izlenen veya sabitlenmiş şekilde konumlandırılması, sabit bir bindirme olarak operasyon alanını kapatması veya operasyon alanının yanına sabitlendiğinde doğrudan karşılaştırmayı engellemesi nedeniyle dezavantajlı olabilir. Ameliyat sırasındaki ödem, yumuşak doku deformasyonu, insizyon, doku manipülasyonu, traksiyon, cerrahi ekspozisyon ve ilerleyici şişlik de hastanın ameliyat sırasındaki anatomisi ile ameliyat öncesi veya modifiye edilmiş holografik modeller arasındaki karşılaştırmayı etkileyebilir. Bu faktörler holografik referans görüntülerinin yorumlanmasını değiştirebilse de, geleneksel 2D referans görüntüler kullanılırken de mevcuttur. Deneyimli cerrahlar, referans görüntünün boyutluluğundan bağımsız olarak bu değişkenleri tanıyabilmeli ve hesaba katabilmelidir. Bu iş akışını incelemeye yönelik diğer yaklaşımlar arasında geleneksel 2D referans görüntülerle karşılaştırma, alternatif HMD'lerin kullanımı, kayıtlı bindirme sistemlerinin değerlendirilmesi, hastaya özgü sabitleme yöntemlerinin analizi veya planlanan ve ameliyat sonrası estetik sonuçların kantitatif karşılaştırması yer alabilir. Bu makale bir teknik fizibilite protokolü sunmaktadır ve kantitatif doğrulama çalışmaları şu anda devam etmektedir. 3D holografik görüntüler, geleneksel görüntülere benzer şekilde, rinoplastide kozmetik hedeflerin ameliyat sırasındaki görselleştirmesini artırabilse de, yalnızca referans materyali olarak amaçlanmışlardır. Cerrahi karar verme süreci nihayetinde cerrahın takdirindedir. Bu protokolü kullananlar steriliteyi korumalı ve hasta güvenliğine öncelik vermelidir. Uygun şekilde kullanıldığında, sistemin cerrahi alan ve hasta için minimum risk oluşturması beklenir. Bu protokolün deneysel doğası gereği, her hasta teknolojinin riskleri ve faydaları konusunda bilgilendirilmeli ve ameliyat sırasında HMD kullanımı öncesinde onam formu alınmalıdır.
Bu bulguları doğrulamak için daha fazla araştırmaya ihtiyaç duyulsa da, AR teknolojisi, kozmetik rinoplasti sırasında hastaya özgü 3D referans görüntülere erişimi iyileştirerek yüz plastik ve rekonstrüktif cerrahisinde potansiyel uygulama alanlarına sahip olabilir. AR teknolojisinin kullanımının artması, yüz plastik ve rekonstrüktif cerrahisinde ek uygulama alanlarının belirlenmesini sağlayabilir. Bu yaklaşımı daha fazla doğrulamak için operasyon süresi, doğruluk, estetik sonuçlar, hasta güvenliği ve iş akışı verimliliği gibi objektif sonuçları değerlendiren gelecekteki çok merkezli çalışmalara ihtiyaç vardır.
Yazarlar herhangi bir açıklama beyan etmemiştir.
Bu çalışma, National Institutes of Health (NIH), National Institute on Deafness and Other Communication Disorders (R25DC020728) ve National Cancer Institute (NCI) K08 Kariyer Geliştirme Ödülü (5K08CA293255-02) tarafından desteklenmiştir. Yazarlar, video üretimine katkıları için Shreeya Bahethi'ye teşekkürlerini sunarlar.
| Ad | Şirket | Katalog numarası | Yorumlar |
|---|---|---|---|
| 3B analiz modülü | Canfield Scientific Inc. | N/A | Üç boyutlu görüntü dosyalarını dışa aktarmak için kullanılan VECTRA 3D Analysis Module yazılımı. RRID: N/A |
| 3B yakalama modülü | Canfield Scientific Inc. | N/A | Üç boyutlu yüz görüntülerinin elde edilmesi için kullanılan VECTRA Capture Module yazılımı. RRID: N/A |
| 3B yüz görüntüleme sistemi | Canfield Scientific Inc. | N/A | Yüz görüntüsü elde etmek için kullanılan VECTRA M3 üç boyutlu görüntüleme sistemi. RRID: N/A |
| Bilgisayar iş istasyonu | Dell Inc. | W31C003 | Üç boyutlu yüz görüntüleme sistemi ile birlikte kullanılan iş istasyonu. Minimum gereksinimler: Windows 11 (64-bit), Intel Core i7 veya üzeri, ≥16 GB RAM, ≥4 GB grafik belleğine sahip uyumlu NVIDIA grafik kartı ve iki adet USB 2.0 portu. Canfield Scientific Inc. tarafından yapılandırılmış ve tedarik edilmiştir. |
| Bilgisayar destekli tasarım yazılımı | Autodesk Inc. | N/A | Dönüştürme öncesinde üç boyutlu model dosyalarının onarımı için kullanılan Meshmixer yazılımı. RRID: SCR_015736 |
| Bilgisayar destekli tasarım yazılımı (eski) | Microsoft Corporation | N/A | Üç boyutlu model dosyalarının onarımı için kullanılan Microsoft 3D Builder yazılımı (kullanımdan kaldırıldı; isteğe bağlı alternatif). |
| Yüz morfleme yazılımı | Canfield Scientific Inc. | N/A | Cerrahi planlama için istenen kozmetik simülasyonu oluşturmak amacıyla kullanılan Face Sculptor yazılımı. RRID: N/A |
| Baş üstü ekran | Apple Inc. | N/A | İntraoperatif görselleştirme için kullanılan Apple Vision Pro (M2) karma gerçeklik başlığı. RRID: N/A |
| Hologram yönetim platformu | ApoQlar Medical | N/A | Görselleştirme öncesinde holografik modellerin yüklenmesi ve yönetilmesi için kullanılan HoloMedicine Online Preview uygulaması. RRID: N/A |
| Hologram görüntüleme uygulaması | ApoQlar Medical | N/A | Holografik modelleri baş üstü ekranda görselleştirmek için kullanılan VSI HoloMedicine Preview uygulaması. RRID: N/A |
| Açık kaynaklı üç boyutlu modelleme yazılımı | Blender Development Team | Version 4.4 | Üç boyutlu modellerin .glb formatına dönüştürülmesi ve ağ azaltma (mesh decimation) işlemi için kullanılan Blender yazılımı. RRID: SCR_008606 |
Bu makale yayımlandı
Video yakında