Name: Pionierskie podejścia do precyzyjnej chirurgii dostosowanej do potrzeb pacjenta z wykorzystaniem obrazowania i rzeczywistości wirtualnej (Wideo) | JoVE Journal
Uploaded: 2024-04-05T13:20:00.000+00:00
Duration: 6 min 18 s
Description: Odkryj zastosowanie rzeczywistości wirtualnej i automatycznej segmentacji w planowaniu zabiegów neurochirurgicznych. Metoda ta zmniejsza ekspozycję na promieniowanie i skraca czas operacji, poprawiając bezpieczeństwo pacjenta.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

Specjalne podziękowania kierujemy do komisji recenzyjnej za wnikliwe opinie, a do redakcji za nieocenione komentarze, wiedzę, wskazówki i wsparcie podczas całego procesu pisania tego artykułu. Bardzo doceniamy środowisko współpracy wspierane przez Partnerów Misji w OSF HealthCare System, które podniosło jakość tej pracy. Podziękowania dla OSF HealthCare System za udostępnienie zasobów i wsparcia oraz dla Laboratorium Zaawansowanego Obrazowania i Modelowania w Centrum Symulacji i Edukacji Skoków za ich pomoc.

Zdeidentyfikowane ludzkie DICOM-y lub DICOM-y do opieki nad pacjentem są używane zgodnie z wytycznymi instytucjonalnymi dotyczącymi opieki nad pacjentem, Ustawą o przenośności i odpowiedzialności w ubezpieczeniach zdrowotnych z 1996 roku (HIPAA) oraz współpracą z Institutional Review Board (IRB), gdy jest to właściwe.
1. Anatomiaspecyficzna dla danego języka
<ol>
	<li>Pozyskiwanie skanów medycznych
	<ol>
		<li>Rozpocznij proces segmentacji od lekarza lub chirurga, który zleci skany medyczne. Skany te są częścią standardowego protokołu opieki nad pacjentem i nie wprowadzają dodatkowych procedur.</li>
		<li>Jeśli lekarz wie, że poprosi o segmentację, upewnij się, że prosi o wyeksportowanie cienko pokrojonych zestawów danych z rezonansu magnetycznego lub tomografii komputerowej. W większości przypadków te cienkie plasterki mają grubość mniejszą niż 1 mm; Jednak ta rozdzielczość może się różnić w zależności od skanera. Wykonaj skany CTA z kontrastem, aby zapewnić prawidłową segmentację naczyń krwionośnych i puli krwi.
		<ol>
			<li>W celu uzyskania danych należy pobrać sekwencję MRI 3D z następującymi sugerowanymi parametrami: bieg w osi, zapewnić grubość warstwy i odstęp między warstwami 0,625 mm lub mniejszy, odstępy zerowe. Uzyskaj serię CT 3D z następującymi sugerowanymi parametrami: skaner warstw w trybie spiralnym, grubość warstwy i odstęp między warstwami 0,625 mm, np. Neuro: Kvp 120, zakres Smart mA 100-740, prędkość obrotowa przy 0,5 ms lub Cardiac: Kvp 70, zakres Smart mA 201-227 (inteligentny tryb MA 226), prędkość obrotowa 0,28 ms14. Postępuj zgodnie z parametrami spiralnymi instytucji dla każdej części ciała. 
			UWAGA: Sekwencja 3D powinna być uzyskana tak, aby w rekonstrukcji była rozdzielczość zbliżona do izotropowej w płaszczyźnie osiowej, czołowej i strzałkowej. W większości przypadków należy pozyskać najcieńsze plastry. Sekwencja 3D jest uruchamiana jako dodatek do standardowego protokołu obrazowania stosowanego przez instytucję. Jest jednak prowadzony w tym samym czasie, więc dodatkowa praca, narażenie na promieniowanie i koszty dla zespołu klinicznego i pacjenta są minimalne.</li>
		</ol>
		</li>
	</ol>
	</li>
	<li>Poproś lekarza, aby poprosił o segmentację modelu, określając, jaka anatomia będzie głównym celem procesu segmentacji (lekarz lub chirurg zwykle wykonuje ten krok).</li>
	<li>Pobierz dane skanowania i zapisz je lokalnie.
	<ol>
		<li>Jeśli wykonano więcej niż jedno skanowanie, upewnij się, że zestawy danych DICOM ze skanowania są porównywane w celu określenia, który zestaw skanowania ma najcieńsze ustawienie wycinka i najlepszy kontrast, ponieważ zapewni to najwyższą rozdzielczość modeli 3D po podzieleniu na segmenty.</li>
		<li>Po ustaleniu najlepszego zestawu obrazów pobierz go z bazy danych obrazów w celu segmentacji, anonimizacji lub pozostawienia danych bez zmian w chronionych informacjach zdrowotnych (PHI). Ten protokół będzie działał z anonimowym DICOM.</li>
	</ol>
	</li>
	<li>Zaimportuj zestaw danych DICOM do oprogramowania do segmentacji. 
	UWAGA: Poniższy zestaw instrukcji używa terminów specyficznych dla oprogramowania do segmentacji Materialise Mimics. Chociaż pakiet Materialise Suite jest oprogramowaniem opartym na subskrypcji, istnieją alternatywy typu open source, takie jak 3DSlicer. Nazwy narzędzi i terminologia mogą się różnić w zależności od innych narzędzi do segmentacji.</li>
	<li>Stwórz przybliżoną maskę docelowej anatomii, takiej jak kość, kałuża krwi, tętniak itp.
	<ol>
		<li>Na karcie SEGMENT wybierz narzędzie Nowa maska.</li>
		<li>Ustaw górną i dolną granicę progu, klikając i przeciągając oba, aby uchwycić jak najwięcej odpowiedniej anatomii celu, jednocześnie ograniczając przechwytywanie otaczających tkanek. Kliknij i przeciągnij granice w narzędziu progu lub wprowadź żądaną jednostkę Hounsfielda (HU).</li>
		<li>Podczas ustawiania progów przytnij do określonego obszaru skanowania, aby uniknąć nadmiernej selekcji otaczającej tkanki. Górna i dolna granica progu różnią się znacznie w zależności od typu skanowania, typu sekwencji, stopnia kontrastu i pacjenta.</li>
		<li>Kliknij przycisk OK, aby sfinalizować maskę zgrubną.</li>
	</ol>
	</li>
	<li>Użyj innych narzędzi na karcie SEGMENT, aby usunąć niepotrzebne części maski lub dodać brakującą tkankę w razie potrzeby.
	<ol>
		Użyj <li>narzędzia Powiększanie regionu, aby oddzielić wszystkie woksele maski bezpośrednio połączone z wokselem wybranym przez użytkownika; użyj narzędzia Edytuj maskę, aby dodać lub usunąć woksele w masce za pomocą okien 2D i 3D; użyj opcji Edycja wielu plasterków, aby dodać lub usunąć woksele poprzez interpolację między plasterkami znajdującymi się dalej od siebie; a następnie użyj opcji Wypełnij otwory lub Inteligentne wypełnienie, aby wypełnić otwory o rozmiarze zdefiniowanym przez użytkownika w masce.</li>
		<li>Kontynuuj poprawianie maski, korzystając z narzędzi na karcie, aż interpolacja 2D do 3D będzie tak dokładna, jak to możliwe.</li>
	</ol>
	</li>
	<li>Powtórz kroki 1.5 i 1.6 dla wszystkich docelowych struktur anatomicznych.</li>
	<li>Skonsultuj się z lekarzem w sprawie zakończonej segmentacji, aby zapewnić dokładność.
	<ol>
		<li>Pokaż gotowe maski lekarzowi, aby upewnić się, że ważna anatomia nie została pominięta, a nadmiar anatomii nie został uwzględniony. W większości przypadków skonsultuj się z lekarzem, który prosi o segmentację w celu kontroli jakości. Lekarz upewnia się, że część DICOM podświetlona przez maskę na każdym wycinku jest tak dokładna, jak to możliwe (patrz <silna klasa="xfig">Rysunek 1).</li>
	</ol>
	</li>
	<li>Segmentacja eksportu w celu dalszego przetwarzania.
	<ol>
		<li>Konwertuj sfinalizowane maski na części za pomocą narzędzia Oblicz część znajdującego się w menu Zarządzanie projektem po prawej stronie.</li>
		<li>Eksportuj obliczone części do plików 3D, klikając prawym przyciskiem myszy część i wybierając opcję Eksportuj STL.</li>
	</ol>
	</li>
</ol>
2. Przygotuj model do wirtualnej rzeczywistości
<ol>
	<li>Utwórz nowy projekt Blendera i usuń domyślne elementy sceny. Naciśnij a, aby podświetlić wszystkie widoczne elementy, a następnie x, a następnie Enter, aby usunąć je ze sceny. 
	UWAGA: Blender to darmowe oprogramowanie do modelowania o otwartym kodzie źródłowym. Podczas gdy inne programy do modelowania mogą być w stanie wykonać te same zadania, terminologia użyta w tym kroku będzie specyficzna dla Blendera.</li>
	<li>Zaimportuj pliki anatomiczne za pomocą opcji Plik > Importuj > Stl (.stl).</li>
	<li>Dostosuj anatomię pacjenta do pochodzenia świata.
	<ol>
		<li>Wybierz całą anatomię pacjenta, aby zachować względne położenie. Aby to zrobić, naciśnij a po zaimportowaniu wszystkich plików.</li>
		<li>Użyj narzędzi Przesuwanie i Obróć, aby wyrównać anatomię z początkiem świata. Upewnij się, że nos pacjenta jest wyrównany z jedną osią, przy czym oś prostopadła styka się odpowiednio z obszarem ucha i górną częścią czaszki. Korzystaj z widoków prostokątnych, które można aktywować za pomocą widżetu w prawym górnym rogu interfejsu blendera.</li>
	</ol>
	</li>
	<li>Zaimportuj kątomierz VR i dopasuj go do anatomii pacjenta. Ten kątomierz został specjalnie zaprojektowany przez zespół inżynierów OSF, aby pomóc w pozyskiwaniu kątów ramienia C w VR, na podstawie kątów w przestrzeni 3D.
	<ol>
		<li>Zaimportuj plik .stl kątomierza z pliku uzupełniającego 1.</li>
		<li>Wyrównaj (0,0) na kątomierzu, reprezentowanym przez najdłuższy znak pomiaru, z nosem pacjenta. Ustaw szczelinę w ramionach kątomierza w kierunku stóp pacjenta.</li>
		<li>Odpowiednio przeskaluj kątomierz. W większości przypadków kątomierz należy skalować dość mało, aby zapewnić łatwość pomiaru po skalowaniu w VR. W przypadku tętniaków należy postarać się o skalowanie kątomierza w taki sposób, aby znajdował się tuż poza obszarem tętniaka.</li>
	</ol>
	</li>
	<li>Dopasuj początki anatomii do początków świata.
	<ol>
		<li>Kliknij prawym przyciskiem myszy, kliknij główną rzutnię i wybierz opcję Przyciągaj kursor > do początku świata. Dzięki temu kursor 3D zostanie wyrównany z początkiem układu współrzędnych globalnych.</li>
		<li>Wybierz wszystkie widoczne modele za pomocą a.</li>
		<li>Kliknij prawym przyciskiem myszy, kliknij w rzutni i wybierz Ustaw początek > Początek układu współrzędnych na kursor 3D. Powoduje to wyrównanie początku 3D wszystkich modeli do tego samego punktu, zapewniając, że będą one prawidłowo wyrównane i skalowane po zaimportowaniu do VR.</li>
	</ol>
	</li>
	<li>Dodaj teksturę lub kolor do modeli zgodnie z potrzebami, aby lepiej rozróżnić się w VR.
	<ol>
		<li>Jest to krok opcjonalny. Wybierz poszczególne pliki .stl, a następnie kliknij kartę Właściwości materiału po prawej stronie ekranu. W tej zakładce kolor bazowy można dostosować do żądanego koloru. Powtórz ten krok dla każdego obiektu, aby dodać kolor.</li>
	</ol>
	</li>
	<li>Wyeksportuj sfinalizowany model jako pojedynczy plik glb/.gltf. Upewnij się, że nie jest zaznaczona żadna z opcji Ogranicz do na karcie Dołączanie w oknie eksportu. 
	UWAGA: Ten. Format pliku glb/.gltf odzwierciedla typ pliku wymagany do użycia w oprogramowaniu VR, a także do przesłania do biblioteki NIH 3D. W przypadku innego oprogramowania mogą być potrzebne inne typy eksportu.</li>
</ol>
3. Szkolenie lekarzy w wirtualnej rzeczywistości
UWAGA: Poniższe instrukcje są napisane do użytku z oprogramowaniem do cyfrowej klasy Enduvo. Chociaż możliwe jest korzystanie z innego oprogramowania do przeglądania 3D, możliwość przesuwania modeli, umieszczania kamer i nagrywania pozycji lekarza to niektóre funkcje, które sprawiają, że to oprogramowanie jest idealne do tej procedury. Różne zestawy słuchawkowe VR, kontrolery i kombinacje oprogramowania mogą mieć różne elementy sterujące.
<ol>
	<li>Utwórz nową lekcję.
	<ol>
		<li>Zaimportuj plik .gltf wyeksportowany w kroku 2.7 z menu tworzenia lekcji. Oprogramowanie może wygenerować komunikat o następującej treści: Typ pliku (GLB), który próbujesz przesłać, nie jest obecnie w pełni obsługiwany. Zignoruj ten komunikat i kliknij przycisk Potwierdź.</li>
	</ol>
	</li>
	<li>Otwórz lekcję w VR w celu sfinalizowania.
	<ol>
		<li>Korzystając z menu przezroczystości, do którego można uzyskać dostęp po naciśnięciu pendrive'a lub joysticka jednego z kontrolerów, ukryj wszystkie modele z wyjątkiem docelowej anatomii. Tętniak powinien być jedynym widocznym modelem.</li>
	</ol>
	</li>
	<li>Umieść chirurga lub lekarza w VR i daj mu trochę czasu na zapoznanie się z przestrzenią i funkcjami 3D oraz anatomią na lekcji.</li>
	<li>Gdy chirurg poczuje się komfortowo z anatomią, rozpocznij nagrywanie.
	<ol>
		<li>Uruchom funkcję nagrywania za pomocą wirtualnego przycisku w przestrzeni VR lub przycisku nagrywania na monitorze dodatkowym.</li>
		<li>Pozwól chirurgowi obrócić anatomię docelową, aby znaleźć preferowane kąty widzenia zarówno dla przednio-tylnego (AP), jak i bocznego widoku fluoroskopowego. Po znalezieniu preferowanego kąta poproś chirurga, aby zatrzymał się na chwilę i stwierdził, że znalazł preferowany kąt i czy obecny kąt widzenia to AP czy boczny.</li>
		<li>Po znalezieniu wszystkich preferowanych kątów zatrzymaj nagrywanie za pomocą przycisku VR lub monitora zewnętrznego.</li>
	</ol>
	</li>
</ol>
4. Generowanie mapy drogowej fluoroskopii w VR
<ol>
	<li>Zdobądź analogi fluoroskopii za pomocą zarejestrowanego umieszczenia chirurga.
	<ol>
		<li>Umieść obraz naśladujący szary odcień tła obrazu fluoroskopowego za modelem w przestrzeni wirtualnej. Użyj przycisku wyboru na kontrolerze, często spustu z tyłu kontrolera, aby manipulować obrazem w razie potrzeby. Tworzy to spójny kolor tła, który ułatwia przeglądanie anatomii i jest bardziej reprezentatywny dla fluoroskopii.</li>
		<li>Ustaw kamerę w jednej linii z okiem chirurga w czasie zadeklarowanym jako preferowany kąt widzenia, upewniając się, że kamera jest skierowana mniej więcej na środek docelowej anatomii. Chirurg pojawi się w VR jako zestaw unoszących się w powietrzu okularów i dwóch kontrolerów.</li>
		<li>Zrób migawkę 2D, gdy aparat znajduje się w żądanej pozycji. Powtórz ten krok dla każdego preferowanego kąta.</li>
	</ol>
	</li>
	<li>Uzyskuj kąty ramienia C za pomocą ruchów chirurga i kątomierza.
	<ol>
		<li>Zatrzymaj nagraną lekcję, gdy chirurg zadeklaruje preferowany kąt widzenia.</li>
		<li>Kliknij panel dotykowy, aby otworzyć menu podręczne i zaznacz pole wyboru Wł./Wył., aby odkryć kątomierz dołączony do modelu.</li>
		<li>Użyj przycisku chwytania na kontrolerze, aby wybrać i manipulować wskaźnikiem lub krawędzią prostą zgodnie z punktem widzenia chirurga, przechodząc również przez początek kątomierza.</li>
		<li>Cofnij się od modelu i wyświetl kąty z prostopadłych punktów widzenia odpowiadających ruchom ramienia C.</li>
		<li>W przypadku neurologii, w którym nos pacjenta jest zorientowany pod kątem 0° we wszystkich osiach ramienia C, należy przyjąć kąty AP z płaszczyzny strzałkowej i osiowej. Weź kąty boczne od płaszczyzny koronalnej i osiowej. W obu przypadkach płaszczyzna osiowa odpowiada prawemu i lewemu kątowi ramienia C, podczas gdy płaszczyzna strzałkowa i czołowa odpowiadają kątom czaszkowym i ogonowym.</li>
		<li>Powtórz powyższe kroki dla każdego preferowanego kąta.</li>
	</ol>
	</li>
</ol>

Virtual Reality-3D Modeling for Minimally Invasive Neuro-Interventional Planning

<ol><li>Xia, J., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Three-dimensional+virtual+reality+surgical+planning+and+simulation+workbench+for+orthognathic+surgery%5BTitle%5D)+AND+%22Int+J+Adult+Orthodon+Orthognath+Surg%22%5BJournal%5D)">Three-dimensional virtual reality surgical planning and simulation workbench for orthognathic surgery.</a> Int J Adult Orthodon Orthognath Surg. 15 (4), 265-282 (2000).</li>
<li>Boedecker, C., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Using+virtual+3D-models+in+surgical+planning%3A+workflow+of+an+immersive+virtual+reality+application+in+liver+surgery%5BTitle%5D)+AND+%22Langenbecks+Arch+Surg%22%5BJournal%5D)">Using virtual 3D-models in surgical planning: workflow of an immersive virtual reality application in liver surgery.</a> Langenbecks Arch Surg. 406, 911-915 (2021).</li>
<li>Reitinger, B., Bornik, A., Beichel, R., Schmalstieg, D. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Liver+surgery+planning+using+virtual+reality%5BTitle%5D)+AND+%22IEEE+Comput+Graph+Appl%22%5BJournal%5D)">Liver surgery planning using virtual reality.</a> IEEE Comput Graph Appl. 26 (6), 36-47 (2006).</li>
<li>Robiony, M., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Virtual+reality+surgical+planning+for+maxillofacial+distraction+osteogenesis%3A+The+role+of+Reverse+Engineering+Rapid+Prototyping+and+cooperative+work%5BTitle%5D)+AND+%22J+Oral+Maxillofacial+Surg%22%5BJournal%5D)">Virtual reality surgical planning for maxillofacial distraction osteogenesis: The role of Reverse Engineering Rapid Prototyping and cooperative work.</a> J Oral Maxillofacial Surg. 65 (6), 1198-1208 (2007).</li>
<li>Xia, J., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Three-dimensional+virtual-reality+surgical+planning+and+soft-tissue+prediction+for+orthognathic+surgery%5BTitle%5D)+AND+%22IEEE+Trans+Info+Tech+Biomed%22%5BJournal%5D)">Three-dimensional virtual-reality surgical planning and soft-tissue prediction for orthognathic surgery.</a> IEEE Trans Info Tech Biomed. 5 (2), 97-107 (2001).</li>
<li>Kim, Y., Kim, H., Kim, Y. O. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Virtual+reality+and+augmented+reality+in+plastic+surgery%3A+A+Review%5BTitle%5D)+AND+%22Arch+Plastic+Surg%22%5BJournal%5D)">Virtual reality and augmented reality in plastic surgery: A Review.</a> Arch Plastic Surg. 44 (3), 179-187 (2017).</li>
<li>Ayoub, A., Pulijala, Y. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+application+of+virtual+reality+and+augmented+reality+in+oral+%26+maxillofacial+surgery%5BTitle%5D)+AND+%22BMC+Oral+Health%22%5BJournal%5D)">The application of virtual reality and augmented reality in oral & maxillofacial surgery.</a> BMC Oral Health. 19 (1), 238(2019).</li>
<li>Ulbrich, M., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Advantages+of+a+training+course+for+surgical+planning+in+virtual+reality+for+oral+and+maxillofacial+surgery%3A+Crossover+study%5BTitle%5D)+AND+%22JMIR+Serious+Games%22%5BJournal%5D)">Advantages of a training course for surgical planning in virtual reality for oral and maxillofacial surgery: Crossover study.</a> JMIR Serious Games. 11, e40541(2023).</li>
<li>Lyuksemburg, V., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Virtual+reality+for+preoperative+planning+in+complex+surgical+oncology%3A+A+single-center+experience%5BTitle%5D)+AND+%22J+Surg+Res%22%5BJournal%5D)">Virtual reality for preoperative planning in complex surgical oncology: A single-center experience.</a> J Surg Res. 291, 546-556 (2023).</li>
<li>Macario, A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((What+does+one+minute+of+operating+room+time+cost%5BTitle%5D)+AND+%22J+Clin+Anesth%22%5BJournal%5D)">What does one minute of operating room time cost.</a> J Clin Anesth. 22 (4), 233-236 (2010).</li>
<li>Bramlet, M., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Virtual+reality+visualization+of+patient+specific+heart+model%5BTitle%5D)+AND+%22J+Cardiovasc+Mag+Res%22%5BJournal%5D)">Virtual reality visualization of patient specific heart model.</a> J Cardiovasc Mag Res. 18 (1), 13(2016).</li>
<li>Guillot, A., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Relationship+between+spatial+abilities%2C+mental+rotation+and+functional+anatomy+learning%5BTitle%5D)+AND+%22Adv+Health+Sci+Edu%22%5BJournal%5D)">Relationship between spatial abilities, mental rotation and functional anatomy learning.</a> Adv Health Sci Edu. 12 (4), 491-507 (2006).</li>
<li>Juhnke, B., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Use+of+virtual+reality+for+pre-surgical+planning+in+separation+of+conjoined+twins%3A+A+case+report%5BTitle%5D)+AND+%22Proc+Inst+Mech+Eng+H%22%5BJournal%5D)">Use of virtual reality for pre-surgical planning in separation of conjoined twins: A case report.</a> Proc Inst Mech Eng H. 233 (12), 1327-1332 (2019).</li>
<li>Mattus, M. S., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Creation+of+patient-specific+silicone+cardiac+models+with+applications+in+pre-surgical+plans+and+hands-on+training%5BTitle%5D)+AND+%22J+Vis+Exp%22%5BJournal%5D)">Creation of patient-specific silicone cardiac models with applications in pre-surgical plans and hands-on training.</a> J Vis Exp. (180), e62805(2022).</li>
<li>Kern, M. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Angiographic+projections+made+simple%3A+An+easy+guide+to+understanding+oblique+views%5BTitle%5D)+AND+%22Cath+Lab+Digest%22%5BJournal%5D)">Angiographic projections made simple: An easy guide to understanding oblique views.</a> Cath Lab Digest. 19 (8), (2011).</li>
<li>Reinschluessel, A. V., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Virtual+reality+for+surgical+planning+-+evaluation+based+on+two+liver+tumor+resections%5BTitle%5D)+AND+%22Front+Surg%22%5BJournal%5D)">Virtual reality for surgical planning - evaluation based on two liver tumor resections.</a> Front Surg. 9, 821060(2022).</li>
<li>Tang, R., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Augmented+reality+technology+for+preoperative+planning+and+intraoperative+navigation+during+Hepatobiliary+Surgery%3A+A+review+of+current+methods%5BTitle%5D)+AND+%22Hepatobiliary+Pancreat+Dis+Int%22%5BJournal%5D)">Augmented reality technology for preoperative planning and intraoperative navigation during Hepatobiliary Surgery: A review of current methods.</a> Hepatobiliary Pancreat Dis Int. 17 (2), 101-112 (2018).</li>
<li>Manzie, T., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Virtual+reality+digital+surgical+planning+for+jaw+reconstruction%3A+A+usability+study%5BTitle%5D)+AND+%22ANZ+J+Surg%22%5BJournal%5D)">Virtual reality digital surgical planning for jaw reconstruction: A usability study.</a> ANZ J Surg. 93 (5), 1341-1347 (2023).</li>
<li>Corren, Y. B., et al. CT-based Simulation of Projection Angiography Using the SlicerHeart Virtual Cath Lab [Poster Presentation]. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aCorren%2C+YB+%22World+Congress+of+Pediatric+Cardiology+and+Cardiac+Surgery%22">World Congress of Pediatric Cardiology and Cardiac Surgery</a>. , (2023).</li>
</ol>

Matthew Bramlet jest współzałożycielem firmy Enduvo, Inc. Pozostali autorzy oświadczają, że nie posiadają żadnych istotnych lub istotnych interesów finansowych związanych z badaniami opisanymi w niniejszym artykule.

Modelowanie 3D zostało wprowadzone do medycznych przepływów pracy wraz z pojawieniem się technologii druku 3D 2,3,4,6,7,9,11, ale VR zapewnia nowatorskie zastosowania technologii 3D poza fizycznym obiektem 3D. Próby odtworzenia anatomii i scenariuszy w wirtualnym świecie pozwalają na spersonalizowaną praktykę medyczną na poszczególnych pacjentach 1,2,3,4,9,11,13,16. Praca ta demonstruje szerokie możliwości tworzenia nowych symulacji przedoperacyjnych w cyfrowym świecie przy minimalnym wysiłku.
W całym przedstawionym protokole znajduje się kilka kroków, które mają kluczowe znaczenie dla powodzenia sprawy. Najważniejszym czynnikiem w uzyskaniu odpowiednich wyników z właściwą rozdzielczością jest uzyskanie prawidłowego obrazowania medycznego. Prezentowany proces nie wymaga dodatkowych badań USG na pacjencie, z wykorzystaniem standardowego badania CTA, które jest planowane dla każdego przypadku tętniaka wewnątrzczaszkowego. Większość skanerów przechowuje skany przez krótki czas, w zależności od modelu skanera i protokołu systemu opieki zdrowotnej, co pozwala technikowi obrazowania na przesłanie uzyskanych cienkich plasterków skanów, zwykle plasterki o grubości mniejszej niż 1 mm często nie są przechowywane dłużej niż kilka dni ze względu na rozmiar pamięci. Te cienkie plasterki pozwalają na uzyskanie większej szczegółowości i uwzględnienie mniejszej anatomii, takiej jak naczynia krwionośne. Po przeprowadzeniu segmentacji należy przeprowadzić kontrolę jakości przez lekarza, aby zapewnić, że wygenerowane modele 3D jak najdokładniej odwzorowują anatomię pacjenta w przyszłych krokach. Kontrola jakości wszystkich modeli powinna być częścią procesu segmentacji, minimalizując możliwość rozprzestrzeniania się błędów w pozostałej części protokołu. Kontrola jakości obejmuje granice naczyń krwionośnych i segmentację tętniaka oddzielnie od otaczających naczyń, podobnie jak w przypadku kontrastu. Kontrola jakości z lekarzem ma ogromne znaczenie, ponieważ lekarz ponosi pełną odpowiedzialność za dokładność modeli, zwłaszcza jeśli modele mają być wykorzystywane w dalszym podejmowaniu decyzji dotyczących leczenia pacjenta. W niektórych okolicznościach może być wykonalne lub praktyczne, aby lekarz samodzielnie wykonał etap segmentacji.
Kolejnym ważnym krokiem w protokole jest utrzymanie wyrównania modelu przestrzennego przy jednoczesnej integracji narzędzia pomiarowego kątomierza. Blender okazał się niezwykle pomocnym narzędziem na tym etapie, ponieważ pozwala na połączenie wielu typów plików STL w jeden połączony plik z wieloma warstwami, z których każda jest wyrównana przestrzennie i może być kolorowana lub teksturowana dla zwiększenia przejrzystości. Dodatkowo na tym etapie dodawany jest kątomierz STL, dzięki czemu dane kątowe mogą być zbierane w VR. Ten model kątomierza został specjalnie opracowany przy użyciu narzędzia do projektowania wspomaganego komputerowo (CAD), SolidWorks. Korzystając z wysoce precyzyjnych narzędzi do wymiarowania w oprogramowaniu, stworzono łuk ze znakami tikowymi oznaczającymi co 5° we wszystkich trzech osiach. Kątomierz posiada również krzyż nitkowy oznaczający prawdziwy środek tego modelu i pozwalający na wyrównanie ze środkiem anatomii pacjenta. W modelu znajduje się również duża kreska oznaczająca (0,0), która ma być wyrównana z nosem pacjenta. Należy również pamiętać, że zostało to zrobione ręcznie i mogło zwiększyć odsetek błędów. Wyrównanie ma ogromne znaczenie dla zapewnienia dokładności wszystkich potencjalnych pomiarów kąta. Po odpowiednim wyrównaniu model jest gotowy do VR, gdzie zapis ułożenia modelu przez lekarza pozwala na określenie w przyszłości kątów, pod jakimi model został umieszczony. Podczas nagrania wszystko w przestrzeni wirtualnej jest rejestrowane w odniesieniu do siebie nawzajem, przede wszystkim punkt widzenia lekarza (POV) oraz ruchy i obroty modeli. Wykorzystując w pełni to nagranie i funkcję pauzy, prosta krawędź jest umieszczana od punktu widzenia lekarza przez krzyż celownika modelu kątomierza, a pomiary można obserwować w sposób niezwykle podobny do użycia prawdziwego kątomierza.
Metodologia ta ma jednak pewne ograniczenia. Jednym z takich ograniczeń jest to, że niekoniecznie istnieje jedna prawidłowa orientacja tętniaka, gdy ogląda się go we fluoroskopii. Doprowadziło to do wielu prób walidacji po prostu ze względu na różne kąty widzenia. To ograniczenie może być postrzegane jako możliwa korzyść z perspektywy, że dzięki dodatkowej znajomości, która wynika z manipulowania modelem 3D, możliwe jest, że lekarz znajdzie optymalny widok w porównaniu z obecną metodą określania kątów na sali operacyjnej. Innym potencjalnym ograniczeniem tego protokołu jest to, że możliwe jest określenie kąta widzenia w VR, który w rzeczywistości nie byłby możliwy do osiągnięcia przez ramiona C. To ograniczenie byłoby brane pod uwagę i znane lekarzowi w VR, aby można było określić specyfikacje, gdyby stało się to częścią planowania chirurgicznego. Kolejnym ograniczeniem, świadczącym o znaczeniu etapu kontroli jakości, jest to, że w niektórych przypadkach naczynia, które są dystalne od tętniaka, w rzeczywistości nie są tak widoczne w procedurach fluoroskopowych, jak byłyby, gdyby zostały włączone do modelu w VR. Może to zmusić lekarza do zwrócenia uwagi na naczynie, które niekoniecznie będzie przeszkadzać podczas zabiegu w VR, co prowadzi do generowania nieoptymalnego kąta widzenia w VR. W segmentacji możliwa jest segmentacja większości naczyń krwionośnych i obszaru zainteresowania; Interwencjolog może zdecydować się na przełączanie się między modelami statków, aby upewnić się, że w ich kącie widzenia nie będzie dodatkowych statków, zastosowanie kontraktu również minimalizuje to ryzyko.
Opracowanie kątomierza modelu 3D i protokołu, który może zapewnić pomiary kątów w wielu osiach w VR, ma ogromne znaczenie i obiecuje szeroki wachlarz potencjalnych zastosowań. Korzyści mogą okazać się wieloaspektowe, potencjalnie wzmacniając różne branże, od architektury i inżynierii po produkcję i zastosowania wojskowe. Jednak, jak wykazano w tym protokole, jego prawdziwy potencjał tkwi w sferze opieki zdrowotnej, bezpośrednio w częściach planowania chirurgicznego opieki nad pacjentem. Chirurdzy mogą wykorzystać to narzędzie do skrupulatnej oceny i planowania wszystkich rodzajów zabiegów, dzięki możliwości wizualizacji i pomiaru kątów bezpośrednio w VR. Technika ta jest podobna do pracy wykonywanej w przypadku cewnikowania serca19. Jedną z bezpośrednich korzyści płynących ze znajomości poszczególnych kątów przed zabiegiem jest znaczne zmniejszenie potrzeby pełnego obrotu o 360 stopni podczas fluoroskopii, powszechnie stosowanej techniki obrazowania podczas naprawy tętniaka. Określając kąty wymagane do naśladowania wirtualnej chirurgicznej mapy drogowej, chirurdzy mogą dokładniej ustawić sprzęt, minimalizując w ten sposób narażenie pacjenta na promieniowanie. Przyczynia się to nie tylko do bezpieczeństwa pacjenta poprzez zminimalizowanie ryzyka związanego z narażeniem na promieniowanie, ale także usprawnia procedurę chirurgiczną. Dzięki skróceniu czasu poświęcanego na korekty fluoroskopii, zespoły chirurgiczne mogą działać bardziej wydajnie, co ostatecznie prowadzi do skrócenia czasu zabiegu.
Najnowsze postępy w modelowaniu 3D i technologii rzeczywistości wirtualnej pozwalają personelowi medycznemu uniknąć improwizacyjnego myślenia podczas operacji poprzez uzyskanie głębokiego zrozumienia wewnętrznej anatomii pacjenta przed operacją we wszystkich przypadkach z wyjątkiem najpilniejszych 1,2,3,4,6,9,11,13,16 . Jeśli pozwala na to czas, personel medyczny powinien wykorzystać segmentację obrazów medycznych i diagnostykę VR, aby lepiej zrozumieć przypadek przed umieszczeniem pacjenta na stole operacyjnym. Ostatecznie doprowadzi to do lepszego zrozumienia każdego pacjenta, a także do skrócenia czasu operacji i czasu pod narkozą.

Leczenie tętniaków wewnątrzczaszkowych jest trudnym aspektem chirurgii neurointerwencyjnej, wymagającym precyzyjnego planowania chirurgicznego w celu zapewnienia optymalnych wyników leczenia pacjentów. W ostatnich latach technologia rzeczywistości wirtualnej (VR) stała się obiecującym narzędziem usprawniającym planowanie chirurgiczne, zapewniając chirurgom dostęp do wciągających, specyficznych dla pacjenta modeli anatomicznych w wirtualnym środowisku 3D1,2,3,4,5,6,7,8. Ten artykuł przedstawia kompleksowy protokół wykorzystania obrazowania medycznego i segmentacji, modelowania 3D, planowania chirurgicznego VR oraz generowania wyidealizowanych wirtualnych map drogowych, aby pomóc w chirurgicznym planowaniu leczenia tętniaków.
Połączenie tych kroków kończy się wirtualnym podejściem do planowania chirurgicznego, pozwalając lekarzom zanurzyć się w wirtualnym środowisku i uzyskać kompleksowe zrozumienie unikalnej anatomii pacjenta przed zabiegiem chirurgicznym. To wciągające podejście umożliwia chirurgom badanie optymalnego ułożenia i symulowanie różnych scenariuszy zabiegowych. Rejestrowanie tych scenariuszy może zapewnić wgląd w rozmieszczenie rzeczywistego sprzętu chirurgicznego, takiego jak pozycjonowanie ramienia C.
Oprócz kątów pozycjonowania, możliwe jest również mierzenie anatomii w środowisku wirtualnym za pomocą narzędzi pomiarowych przeznaczonych dla przestrzeni 3D. Pomiary te mogą dostarczyć informacji na temat prawidłowego rozmiaru i kształtu urządzenia, które ma być używane w przypadku tętniaka wewnątrzczaszkowego9.
Ten protokół przedstawia kompleksowy proces, który płynnie łączy obrazowanie medyczne, segmentację obrazu, przygotowanie modelu VR i generowanie wirtualnej mapy drogowej operacji, aby usprawnić proces planowania operacji. Wykorzystując kombinację najnowocześniejszych technologii, protokół ten zapewnia możliwość zaoszczędzenia cennego czasu na sali operacyjnej10, a także zwiększa pewność siebie chirurga i jego zrozumienie złożonych przypadków chirurgicznych11,12,13.

<table><tbody><tr><td>Krajalnica 3D&nbsp;</td><td></td><td>Nie dotyczy&nbsp;</td><td>Oprogramowanie do segmentacji typu open source&nbsp;</td></tr><tr><td>Blender&nbsp;</td><td></td><td>Nie dotyczy&nbsp;</td><td>Oprogramowanie CAD typu open source, które może importować i edytować modele organiczne utworzone za pomocą segmentacji&nbsp;</td></tr><tr><td>Enduvo&nbsp;</td><td>Enduvo&nbsp;</td><td>Nie dotyczy&nbsp;</td><td>Autorska przeglądarka VR stworzona z myślą o edukacji i nasza wybrana przeglądarka VR &nbsp;</td></tr><tr><td>McKesson PACS zmienia rozwiązanie radiologiczne dla służby zdrowia&nbsp;</td><td>McKesson&nbsp;</td><td>Nie dotyczy&nbsp;</td><td>Każdy system archiwizacji zdjęć i komunikacji powinien być wystarczający, McKessen jest po prostu naszym ulubionym oprogramowaniem PACS.</td></tr><tr><td>Naśladownictwo&nbsp;</td><td>Materializacja&nbsp;</td><td>Nie dotyczy&nbsp;</td><td>Oprogramowanie do segmentacji&nbsp;</td></tr><tr><td>Zadanie&nbsp;</td><td>Oculus&nbsp;</td><td>Nie dotyczy&nbsp;</td><td>Gogle do wirtualnej rzeczywistości&nbsp;</td></tr><tr><td>Steam VR&nbsp;</td><td>Para wodna&nbsp;</td><td>Nie dotyczy&nbsp;</td><td>Oprogramowanie do łączenia komputera z zestawem słuchawkowym. &nbsp;</td></tr><tr><td>Komputer obsługujący VR&nbsp;</td><td></td><td></td><td>Zobacz Steam VR, aby zapoznać się z minimalnymi wymaganiami.</td></tr><tr><td>Przeglądarka VR-STL&nbsp;</td><td>GitHub&nbsp;</td><td>Nie dotyczy&nbsp;</td><td>Przeglądarka VR o otwartym kodzie źródłowym z możliwością importowania i przeglądania plików .stl i&nbsp; mogą być używane, jednak nie możemy zagwarantować, że wszystkie funkcjonalności wymienione w tym dokumencie będą dostępne&nbsp;</td></tr></tbody></table>

pionierskie podejścia do precyzyjnej chirurgii dostosowanej do potrzeb pacjenta z wykorzystaniem obrazowania i rzeczywistości wirtualnej

Pioneering Patient-Specific Approaches for Precision Surgery Using Imaging and Virtual Reality

Wewnątrznaczyniowe leczenie złożonych anomalii naczyniowych przenosi ryzyko otwartych zabiegów chirurgicznych na korzyść minimalnie inwazyjnych rozwiązań wewnątrznaczyniowych. Skomplikowane otwarte zabiegi chirurgiczne były kiedyś jedyną opcją leczenia niezliczonych schorzeń, takich jak wymiana zastawki płucnej i aortalnej, a także naprawa tętniaka mózgu. Jednak ze względu na postęp w urządzeniach dostarczanych przez cewnik i doświadczenie operatorów, procedury te (wraz z wieloma innymi) mogą być obecnie wykonywane za pomocą minimalnie inwazyjnych procedur dostarczanych przez żyłę lub tętnicę centralną lub obwodową. Decyzja o przejściu z procedury otwartej na podejście endowaskularne opiera się na obrazowaniu multimodalnym, często obejmującym zestawy danych obrazowania 3D Digital Imaging and Communications in Medicine (DICOM). Wykorzystując te obrazy 3D, nasze laboratorium generuje modele 3D anatomii patologicznej, umożliwiając w ten sposób analizę przedzabiegową niezbędną do wstępnego zaplanowania krytycznych elementów procedury laboratorium cewnikowania, a mianowicie pozycjonowania ramienia C, pomiaru 3D i generowania wyidealizowanej mapy drogowej. W tym artykule opisano, jak pobierać segmentowane modele 3D patologii specyficznej dla pacjenta i przewidywać uogólnione pozycje ramienia C, jak mierzyć krytyczne dwuwymiarowe (2D) pomiary struktur 3D istotnych dla projekcji fluoroskopowych 2D oraz jak generować analogi mapy drogowej fluoroskopii 2D, które mogą pomóc w prawidłowym ustawieniu ramienia C podczas zabiegów w laboratorium cewnikowania.

Zgodnie z przedstawionym protokołem można wygenerować wirtualne mapy drogowe operacji dla projekcji fluoroskopowej przednio-tylnej (AP) oraz bocznej. Mapy te są tworzone poprzez umieszczenie kamery w punkcie widzenia chirurga w VR w celu uchwycenia optymalnych widoków AP i bocznych, przy jednoczesnym umieszczeniu kolorowego tła za docelową anatomią, aby lepiej odwzorować obraz fluoroskopowy. Na tym etapie wykorzystuje się kątomierz VR do zapisania kąta, pod którym chirurg obserwuje docelową anatomię, rejestrowanego jako prawy lub lewy skośny przedni (RAO/LAO – odpowiednio przesunięcie kamery w prawo lub w lewo względem pacjenta) oraz kranialny lub kaudalny przedni (CRA/CAA – odpowiednio przesunięcie kamery w stronę głowy lub stóp pacjenta)15. Podczas opracowywania tego procesu wykorzystano przypadki retrospektywne, aby umożliwić porównanie kątów mierzonych w VR z rzeczywistymi kątami stosowanymi w chirurgii przy użyciu ramion C. Do procesu tego wybrano trzy różne przypadki retrospektywne, z których każdy był leczony przy użyciu innego urządzenia chirurgicznego. Różnorodność tych trzech przypadków wykazuje uniwersalność przedstawionego protokołu. Chirurga poproszono o wskazanie preferowanych kątów AP i bocznych bez odnoszenia się do kątów ramienia C użytych podczas zabiegu, a następnie pomiary VR porównano z tymi istniejącymi pozycjami ramienia C.
W przypadku 1 zadeklarowany preferowany kąt projekcji AP zmierzono w VR jako 16° CRA, 12° RAO. Rzeczywiste pomiary zastosowane podczas operacji w tym przypadku wynosiły 11° CRA i 13° RAO. Maksymalny błąd wśród tych pomiarów wynosi 5° na osi kranio-kaudalnej. Rycina 2A przedstawia zadeklarowany przez chirurga widok AP w rzeczywistości wirtualnej, następnie Rycina 2B pokazuje rzeczywisty kąt zastosowany w operacji widziany w VR, a Rycina 2C przedstawia obraz z fluoroskopii chirurgicznej. Porównanie tych trzech obrazów wykazuje, że obrazy VR są niezwykle podobne do rzeczywistego obrazu fluoroskopowego przy tym samym kącie.
Widok boczny w tym samym przypadku ukazał jedno z wielu wyzwań tego procesu, wynikające z niewłaściwej weryfikacji modelu 3D. Przez ten błędny przegląd wysegmentowano niektóre zbędne naczynia, które zdaniem chirurga ograniczały widoczność tętniaka w VR, nie są połączone z docelową anatomią i w związku z tym nie są dokładnie odwzorowane w VR. Rozbieżności te były wynikiem błędnej komunikacji dotyczącej wymaganej anatomii docelowej podczas sesji kontroli jakości z lekarzem. Rozbieżności te widoczne są na Rysunku 2D-F, który przedstawia kolejno od lewej do prawej: zadeklarowany przez chirurga widok boczny, reprezentację VR opartą na kątach fluoroskopii chirurgicznej oraz rzeczywiste obrazy fluoroskopowe. Z wyjątkiem zbędnych naczyń, zadeklarowany przez chirurga widok AP ściśle przypomina rzeczywisty obraz fluoroskopowy, mimo że pomiary w płaszczyźnie czołowej i osiowej różniły się odpowiednio o 6° i 26°. Rekonstrukcja rzeczywistych pomiarów w VR, pokazana na Rysunku 2E, przedstawia również widok podobny do rzeczywistej fluoroskopii ukazanej po prawej stronie Rysunku 2F, przy czym główną rozbieżnością są anomalne dodatkowe naczynia. W tym przypadku zastosowano mniej niezawodną ręczną lokalizację narzędzia kątomierza, co może tłumaczyć niewielką różnicę w pomiarze. W przyszłych przypadkach stosuje się kątomierz powiązany z anatomią, aby zapewnić maksymalną dokładność pomiarów kątów wykonywanych w VR.
W przypadkach 2 i 3 widoki wybrane jako optymalne w VR nie były reprezentatywne dla widoków stosowanych w rzeczywistej procedurze. Było to konsekwencją początkowego rozmieszczenia modeli w VR w ramach badania ślepego. Należy zauważyć, że chirurg stwierdził, iż w procedurach fluoroskopowych może istnieć wiele akceptowalnych kątów leczenia i niekoniecznie istnieje jeden prawidłowy kąt. W celu porównania obrazy w VR wykonano pod kątami chirurgicznymi wskazanymi w raporcie. Rysunek 3 przedstawia widok AP w VR na Rysunku 3A oraz chirurgiczny widok AP na Rysunku 3B. Na Rysunku 3 można przeprowadzić podobne porównanie widoków bocznych na Rysunku 3C,D dla przypadku 2. Dla przypadku 3 Rysunek 4 przedstawia porównanie AP na Rysunku 4A,B, a także porównanie boczne na Rysunku 4C,D. Podobieństwa między obrazami VR a fluoroskopią w tych przypadkach dodatkowo demonstrują możliwość wykorzystania VR w planowaniu chirurgicznym.
Istotną zaletą niniejszego protokołu jest usprawnienie planowania chirurgicznego dzięki wykorzystaniu modeli 3D w środowisku VR. Poprzednie badanie nad skutecznością VR w planowaniu operacji w złożonych przypadkach onkologicznych wykazało, że w około 50% przypadków, w których zastosowano VR, zmodyfikowano podejście chirurgiczne w stosunku do planu opracowanego wyłącznie na podstawie zbiorów danych 2D9. Wykazano również przydatność VR w procesie planowania chirurgicznego resekcji guzów wątroby16,17, a także w procedurach dotyczących patologii głowy i szyi18. Chirurg biorący udział w opracowaniu tego protokołu stwierdził, że: w VR mogę znacznie lepiej widzieć [anatomię], co wskazuje na korzyści z zastosowania VR w endowaskularnych zastosowaniach neurochirurgicznych.
<img alt="Analiza tomografii komputerowej z segmentacją, wizualizacja anatomiczna, interfejs oprogramowania do obrazowania medycznego." class="xfigimg" src="/files/ftp_upload/66227/66227fig01.jpg" data-altupdatedat="1788304762000" data-alt="Rysunek 1"> 
Rysunek 1: Zrzut ekranu z oprogramowania do segmentacji. Zrzut ekranu przedstawia zaznaczoną anatomię na podstawie masek. <a href="https://www.jove.com/files/ftp_upload/66227/66227fig01large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tego rysunku.</a>
<img alt="Obrazowanie tętniaka mózgu; modele 3D i angiogram; analiza morfologii, badanie kliniczne." class="xfigimg" src="/files/ftp_upload/66227/66227fig02.jpg" data-altupdatedat="1788304762000" data-alt="Rysunek 2"> 
Rysunek 2: Przypadek 1. (A) Widok przednio-tylny Przypadku 1 w VR, ustawiony przez chirurga operującego. (B) Widok przednio-tylny Przypadku 1 w VR na podstawie pomiarów kątów wykonanych podczas operacji. (C) Widok fluoroskopowy przednio-tylny zarejestrowany podczas operacji. (D) Widok boczny Przypadku 1 w VR, ustawiony przez chirurga operującego. (E) Widok boczny Przypadku 1 w VR na podstawie pomiarów kątów wykonanych podczas operacji. (F) Widok fluoroskopowy boczny zarejestrowany podczas operacji. <a href="https://www.jove.com/files/ftp_upload/66227/66227fig02large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tego rysunku.</a>
<img alt="Modele 3D układu naczyniowego mózgu i angiografia; schemat obrazowania prawej tętnicy mózgowej." class="xfigimg" src="/files/ftp_upload/66227/66227fig03.jpg" data-altupdatedat="1788304762000" data-alt="Rysunek 3"> 
Rysunek 3: Przypadek 2. (A) Widok przednio-tylny przypadku 2 w VR na podstawie pomiarów kątowych wykonanych podczas operacji. (B) Widok z fluoroskopii w projekcji przednio-tylnej przypadku 2 zarejestrowany podczas operacji. (C) Widok boczny przypadku 2 w VR na podstawie pomiarów kątowych wykonanych podczas operacji. (D) Widok z fluoroskopii w projekcji bocznej przypadku 2 zarejestrowany podczas operacji. <a href="https://www.jove.com/files/ftp_upload/66227/66227fig03large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tego rysunku.</a>
<img alt="Angiografia mózgu przedstawiająca struktury naczyniowe i embolizację tętniaka spiralą; analiza obrazowania medycznego." class="xfigimg" src="/files/ftp_upload/66227/66227fig04.jpg" data-altupdatedat="1788304762000" data-alt="Rycina 4"> 
Rycina 4: Przypadek 3. (A) Widok przednio-tylny Przypadku 3 w VR na podstawie pomiarów kątowych wykonanych podczas operacji. (B) Widok fluoroskopowy przednio-tylny Przypadku 3 zarejestrowany podczas operacji. (C) Widok boczny Przypadku 3 w VR na podstawie pomiarów kątowych wykonanych podczas operacji. (D) Widok fluoroskopowy boczny Przypadku 3 zarejestrowany podczas operacji. <a href="https://www.jove.com/files/ftp_upload/66227/66227fig04large.jpg" target="_blank">Kliknij tutaj, aby wyświetlić powiększoną wersję tej ryciny.</a>
Plik uzupełniający 1: Opracowano i wykorzystano w protokole model 3D kątomierzy w formacie plików STL. <a href="https://www.jove.com/files/ftp_upload/66227/protractors.zip" target="_blank">Aby pobrać ten plik, kliknij tutaj.</a>

Postęp w leczeniu wewnątrznaczyniowym zastąpił skomplikowane otwarte procedury chirurgiczne minimalnie inwazyjnymi opcjami, takimi jak wymiana zastawki i naprawa tętniaka. W artykule zaproponowano wykorzystanie modelowania trójwymiarowego (3D) i rzeczywistości wirtualnej do pomocy w pozycjonowaniu ramienia C, pomiarach kąta i generowaniu mapy drogowej do planowania procedur w laboratorium cewnikowania neurointerwencyjnego, minimalizując czas zabiegu.

Pionierskie podejścia do precyzyjnej chirurgii dostosowanej do potrzeb pacjenta z wykorzystaniem obrazowania i rzeczywistości wirtualnej

Endovascular treatment of complex vascular anomalies shifts the risk of open surgical procedures to the benefit of minimally invasive endovascular ...

Celem tego retrospektywnego studium przypadku było zweryfikowanie dokładności stosowania kątomierzy w środowisku rzeczywistości wirtualnej. Było to ślepe badanie, w którym umieszczenie chirurga w VR zostało porównane z rzeczywistym ustawieniem stosowanym w chirurgii. Obecnie optymalna wizualizacja tętniaków mózgu i innych wewnątrzczaszkowych malformacji naczyniowych dla celów leczenia i planowania wymaga wykonania angiogramów rotacyjnych 3D na początku zabiegu.Naraża to pacjenta na promieniowanie i wydłuża czas zabiegu. Segmentacja w rzeczywistości wirtualnej zwiększa pewność siebie chirurga i zwiększa zrozumienie złożonych przypadków chirurgicznych. Ludzkie ciało istnieje w przestrzeni 3D, a zatem oglądanie go w przestrzeni 3D znacznie bardziej wskazuje na anatomię patologiczną niż oglądanie tomografii komputerowej 2D lub rezonansu magnetycznego.Odkrycia te mają wpływ na badania i medycynę, skracając czas planowania określania kąta nachylenia sprzętu do obrazowania na sali operacyjnej. Obecnie pacjenci muszą być skanowani z obrotem 360 stopni, aby można było określić pozycję ramienia C. Wierzymy, że możemy skrócić czas sedacji pacjenta i jego narażenie na promieniowanie, oferując sugestie dotyczące ułożenia ramienia C przed operacją. Segmentacja to czynność polegająca na odtwarzaniu modeli 3D anatomii specyficznej dla pacjenta na podstawie obrazów medycznych.Jest to najbardziej krytyczny krok, ale wymaga dużych zasobów zarówno pod względem wymagań dotyczących oprogramowania, jak i wiedzy ludzkiej. W związku z tym naszym głównym celem badawczym jest automatyzacja segmentacji, wykorzystująca techniki uczenia maszynowego w celu zmniejszenia bariery wejścia do wdrożenia tej technologii na dużą skalę. Aby rozpocząć, uzyskaj cyfrowy obrazowanie i komunikację 3D w medycynie lub zestaw danych DICOM i zaimportuj go do oprogramowania do segmentacji.Aby utworzyć zgrubną maskę anatomii celu, przejdź do zakładki Segment, wybierz Nowe narzędzie Maska. Aby ustawić górną i dolną granicę progu, kliknij je i przeciągnij, aby uchwycić maksimum odpowiedniej anatomii celu. Możesz też wprowadzić żądaną jednostkę Hounsfielda i kliknąć przycisk OK, aby sfinalizować maskę zgrubną.Na karcie Segment wybierz opcję Wzrost regionu, aby oddzielić wszystkie woksele maski bezpośrednio połączone z żądanym wokselem i użyj opcji Edytuj maskę, aby dodać lub usunąć woksele zarówno w oknach 2D, jak i 3D. Korzystanie z wielu plasterków Edytuj, dodawaj lub usuwaj woksele poprzez interpolację między plasterkami oddalonymi od siebie, a następnie użyj inteligentnego wypełnienia, a następnie wypełnij otwory, aby wypełnić otwory o określonym rozmiarze w masce. Po zweryfikowaniu dokładności modeli 3D od lekarza, przekonwertuj uzyskaną maskę na części 3D, a na koniec wyeksportuj ją jako plik stl.Zaimportuj wszystkie pliki anatomiczne za pomocą FileImport.stl. Za pomocą narzędzi Przesuwanie i Obracanie wyrównaj anatomię z początkiem świata. Po wyrównaniu nosa pacjenta z prostopadłą osią zawierającą ucho i czubek czaszki, aktywuj widoki ortograficzne z widżetu w prawym górnym rogu interfejsu Blendera.Aby uzyskać kąty ramienia C w rzeczywistości wirtualnej, zaimportuj kątomierz. plik stl. Skaluj kątomierz dość mały, aby ułatwić pomiar i skaluj kątomierz tuż na zewnątrz w przypadku tętniaków.Ustaw zero stopni na kątomierzu z nosem pacjenta i ustaw szczelinę w ramionach kątomierza w kierunku stóp pacjenta i wyeksportuj jako glb. Na początek przygotuj anatomię segmentową specyficzną dla pacjenta i model VR. Zaimportuj sfinalizowany model jako plik gltf w menu Tworzenie lekcji i kliknij przycisk Potwierdź w wyskakującym okienku, informując, że typ pliku nie jest w pełni obsługiwany.Po wciśnięciu joysticka w dół przejdź do menu Przezroczystość i ukryj wszystkie modele z wyjątkiem docelowej anatomii tętniaka. Ustaw lekarza w VR i zapoznaj go z lekcją anatomii. Rozpocznij nagrywanie w przestrzeni VR i pozwól chirurgowi obrócić anatomię docelową, aby znaleźć preferowane kąty zarówno dla przednio-tylnej, jak i bocznej fluoroskopii.Następnie naciśnij przycisk Stop. Umieść obraz naśladujący tło obrazu fluoroskopowego za modelem w przestrzeni wirtualnej. Chirurg pojawi się w VR jako zestaw unoszących się w powietrzu okularów i dwóch kontrolerów. Ustaw kamerę w jednej linii z polem widzenia chirurga, kierując się mniej więcej na środek docelowej anatomii.Następnie zrób migawkę 2D w żądanej pozycji i powtórz dla każdego preferowanego kąta. Aby uzyskać kąty ramienia C, zatrzymaj nagraną lekcję, gdy chirurg zadeklaruje preferowany kąt widzenia. Kliknij ścieżkę wstecz, aby otworzyć menu podręczne i zaznacz pole wyboru włączania/wyłączania kątomierza.Za pomocą przycisku Chwyć kontroler wybierz i manipuluj wskaźnikiem lub prostą krawędzią w linii z punktem widzenia chirurga, aby przejść przez początek kątomierza. Cofnij się od modelu i wyświetl kąty z prostopadłych punktów widzenia odpowiadających ruchom ramienia C. Uzyskaj kąty przednio-tylne od płaszczyzny strzałkowej i osiowej, a następnie kąty boczne od płaszczyzny czołowej i osiowej.Płaszczyzna osiowa odpowiada prawemu i lewemu kątowi ramienia C, podczas gdy płaszczyzna strzałkowa i czołowa odpowiadają kątom czaszkowym i ogonowym. Kąty przednio-tylne deklarowane przez chirurga w VR były podobne do pomiarów kąta wykonanych podczas operacji i rzeczywistego obrazu fluoroskopii chirurgicznej, podczas gdy w tym samym przypadku zaobserwowano rozbieżności w widokach bocznych.

pioneering-patient-specific-approaches-for-precision-surgery-using

Research

JoVE Journal

Medicine

Medycyna

Przedstawiona tutaj jest metoda projektowania aplikacji na smartfony z rozszerzoną rzeczywistością do wizualizacji anatomicznych trójwymiarowych modeli pacjentów za pomocą wydrukowanego w 3D markera referencyjnego.

Połączenie rzeczywistości rozszerzonej i druku 3D w celu wyświetlania modeli pacjentów na smartfonie

Ten protokół opisuje wykorzystanie planowania i drukowania 3D do rekonstrukcji wad kostnych. Używamy narzędzi do segmentacji do tworzenia modeli 3D, a następnie oprogramowania do projektowania 3D, aby stworzyć implanty dostosowane do potrzeb pacjenta do celów rekonstrukcyjnych równolegle z zabiegiem ablacyjnym lub jako drugi etap.

Planowanie 3D i drukowanie implantów dostosowanych do potrzeb pacjenta w celu rekonstrukcji ubytków kostnych

Wyświetlacz rzeczywistości rozszerzonej, Magic Leap, został użyty w połączeniu z konwencjonalnym systemem nawigacji do umieszczania pedikularnych w modelu świni, stosując nowatorski przepływ pracy. Przy medianie czasu wprowadzania wynoszącej &lt;2,5 min, według Gertzbeina osiągnięto submilimetrową dokładność techniczną i 100% dokładność kliniczną.

Umieszczanie pedikularnych za pomocą wyświetlacza montowanego na głowie w modelu świni

Zdalnie sterowane, wspomagane przez system robota, przezskórne przezbiodrowo-krzyżowe mocowanie śrubowe jest wykonalną techniką. Kanały śrubowe mogą być realizowane z dużą dokładnością dzięki doskonałej swobodzie ruchów i stabilności ramion robota.

Zdalnie sterowana, wspomagana przez system robotyczny, przezskórna technika przezbiodrowo-krzyżowego mocowania śrubowego

Zaproponowano nowatorską metodę skanowania 3D i wirtualnego mapowania resekcji nowotworów w celu poprawy komunikacji między multidyscyplinarnym zespołem opieki onkologicznej.

Ulepszona komunikacja brzegów guza za pomocą skanowania 3D i mapowania

Tłumaczenie wyników mikroskopii przyżyciowej jest utrudnione ze względu na jego płytką głębokość penetracji w tkanki. W tym miejscu opisujemy mysi model komory z oknem grzbietowym, który umożliwia jednoczesną rejestrację mikroskopii przyżyciowej i klinicznie stosowanych metod obrazowania (np. CT, MRI) w celu bezpośredniej korelacji przestrzennej, potencjalnie usprawniając kliniczne tłumaczenie wyników mikroskopii przyżyciowej.

Mysi model guza w komorze grzbietowego fałdu skórnego do połączonej mikroskopii przyżyciowej i obrazowania metodą rezonansu magnetycznego w translacyjnych badaniach nad rakiem

Ten artykuł przedstawia projekt i implementację modułu automatycznej chirurgii opartej na rekonstrukcji 3D opartej na rzeczywistości rozszerzonej (AR). System umożliwia zdalną operację, umożliwiając chirurgom inspekcję zrekonstruowanych cech i odtworzenie chirurgicznych ruchów ręki tak, jakby wykonywali operację w bliskiej odległości.

Automatyczna chirurgia przezcewnikowej wymiany zastawki aortalnej z wykorzystaniem rozszerzonej rzeczywistości

Radykalne endoskopowe tyreoidektomia wiąże się z różnymi powikłaniami chirurgicznymi. W badaniu wykorzystano techniki rzeczywistości mieszanej, aby pomóc chirurgom w wykonywaniu radykalnej endoskopowej tyreoidektomii, mając na celu zwiększenie jej bezpieczeństwa i obniżenie progu chirurgicznego.

Radykcyjna endoskopowa tyreoidektomia wspomagana rzeczywistością mieszaną

Protokół ten oferuje przewodnik do implementacji śledzenia znaczników w podczerwieni dla swobodnie poruszających się fantomów (np. organów) i wizualizacji holograficznej przy użyciu rzeczywistości rozszerzonej. Ponadto przedstawiono w nim konfigurację do przedklinicznej walidacji systemów nawigacji holograficznej wykorzystujących śledzenie elektromagnetyczne na swobodnie poruszających się fantomach.

Techniczne podejście do śledzenia w podczerwieni w nawigacji tkanek miękkich z holograficznym wyświetlaczem montowanym na głowie i walidacją przedkliniczną

Opisujemy kroki, które należy wykonać, aby korzystać z naszego specjalnie zaprojektowanego oprogramowania do integracji, wizualizacji i planowania obrazów w chirurgii epilepsji.

Ścieżka rozwoju integracji obrazów 3D multimodalnych i planowania wspomaganego komputerowo w chirurgii padaczki

Odkryj zastosowanie rzeczywistości wirtualnej i automatycznej segmentacji w planowaniu zabiegów neurochirurgicznych. Metoda ta zmniejsza ekspozycję na promieniowanie i skraca czas operacji, poprawiając bezpieczeństwo pacjenta.

Pionierskie podejścia do precyzyjnej chirurgii dostosowanej do potrzeb pacjenta z wykorzystaniem obrazowania i rzeczywistości wirtualnej (Wideo) | JoVE Journal

Pionierskie podejścia do precyzyjnej chirurgii dostosowanej do potrzeb pacjenta z wykorzystaniem obrazowania i rzeczywistości wirtualnej

Przeglądaj więcej filmów