Name: 유체 - 침지 Fetoscope 광학 왜곡 보정 의료 수준의 소독 가능 대상 (동영상) | JoVE Journal
Uploaded: 2017-02-23T13:00:00.000+00:00
Duration: 7 min 3 s
Description: 학습하세요 내시경 카메라의 광학 왜곡 보정을 위한 멸균 가능한 교정 타겟 개발 방법을. 이 장치는 수술실에서 신속하고 실용적인 교정을 가능하게 하여 태아 수술 등의 임상 환경에서 정확한 영상 획득을 지원합니다.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

playerTrialDesktop

이 작업은 Wellcome Trust [WT101957], Engineering and Physical Sciences Research Council (EPSRC) [NS/A000027/1] 및 National Institute for Health Research Biomedical Research Centre UCLH/UCL High Impact Initiative의 Innovative Engineering for Health 상을 통해 지원되었습니다. Jan Deprest는 Fonds voor Wetenschappelijk Onderzoek Vlaanderen (FWO; 임상 연구원으로서의 JD 1.8.012.07). 다네일 스토야노프는 EPSRC(EP/N013220/1, EP/N022750/1), EU-FP7 프로젝트 CASCADE(FP7-ICT-2913-601021) 및 EU-Horizon2020 프로젝트 EndoVESPA(H2020-ICT- 2015-688592)로부터 자금을 지원받습니다. Sebastien Ourselin은 EPSRC(EP/H046410/1, EP/J020990/1, EP/K005278) 및 MRC(MR/J01107X/1)로부터 자금을 지원받습니다. Marcel Tella는 EPSRC의 자금 지원을 받는 UCL Center for Doctoral Training in Medical Imaging(EP/L016478/1)의 지원을 받고 있습니다.

1. 대상 제작 <ol><li> 샌드 블라스팅 <ol><li> 1.2 mm 두께를 가진 316 스테인레스 스틸 시트를 준비한다. 연필이나 못을 사용하여, 통치자의 도움으로 시트 상에 40mm X 40mm의 정사각형을 그립니다. </li><li> 수동 금속 절단기를 사용하여 그려진 사각형을 잘라. 주의! 손가락을보세요. </li><li> 샘플의 모서리와면을 둥글게 할 파일을 사용합니다. 주의! 그들은 매우 날카로운; 조심해. </li><li> 스테인레스 강판의 크기보다 약간 큰 직선 나무 또는 금속 블록을 준비한다. 그것에 낱장 용지를 넣습니다; 샌드 동안 샘플을 구부러지지 않도록하기 위해 이렇게. </li><li> 내부 폭발 챔버에서 어셈블리를 놓습니다. 집진기를 사용하는 기억 단단히 내부 폭발 챔버를 밀봉하는 단계; 그렇지 않으면, 모래 과정 전체에 걸쳐 확산된다. 눈을 보호하기 위해 보안경을 착용 할 것. </li><li> 직교하는 블라스팅 건을 위치 및 적어도 4-5cm 떨어진 금속 표면. 발 제어 방식을 적용샌드 블 래스팅에 대한 올. 샘플을 변형 할 수있는 고압의 유동 모래 같은 부사를 사용하여 목재 (두께 1~2cm)의 조각 샘플을 넣어. 모래 분사하는 동안, 나무 조각의 가장자리 나 다른 반대를 사용하여 단단히 샘플을 개최합니다. </li><li> 이 양면에 새겨진 교정 패턴을 갖는 것이 바람직 할 경우, 다른 쪽의 샌드 블라스트를 반복한다. </li></ol></li><li> 레이저 패터닝 <ol><li> 도 1에 도시 된 바와 같이, 비대칭 원형의 패턴을 설계한다. </li><li> 설계 중 CAD 소프트웨어 또는 다른 적절한 프로그래밍 언어를 사용하는 도면 교환 형식 (DXF) 파일을 준비한다. 참고 : 편의를 위해,이 문서에 언급 된 디자인을위한 DXF 파일을 생성 할 수있는 파이썬 응용 프로그램이 컴팩트 한 GUI 응용 프로그램 (16)의 일부로 제공됩니다. </li><li> 레이저 절단 소프트웨어로 DXF 파일을 가져옵니다. </li><li> 배경 에칭에 대해 다음 매개 변수를 설정합니다. 레이저 전원 : 40 %, 스캔 속도 :80cm / s의, 주파수 : 4,000 Hz에서, 패스의 수 : 1. </li><li> 패턴을 에칭 다음 매개 변수를 설정합니다. 레이저 전원 : 40 %, 스캔 속도 : 2.1 cm / s로, 주파수 : 4,000 Hz에서, 패스의 수 : 1. </li><li> 작업 플랫폼에 샘플을 넣고 소프트웨어를 사용하여 절단 패턴 정렬. </li><li> 레이저 절단을 수행 한 후, 알코올에 침지하여 샘플을 청소. 그들은 일반적으로 바람직하지 않은 잔류 물을 떠날 어떤 잎사귀를 사용하지 마십시오. </li></ol></li><li> 살균 <ol><li> 살균 패키지의 살균 샘플을 싸서 살균 장치 (오토 클레이브)에 삽입합니다. </li><li> 오토 클레이브에 물 (안 증류수)를 추가하고 대상을 소독하기 위해 사용 설명서 / 제조업체의 권장 사항을 따르십시오. </li></ol></li></ol> 2. 요정 수술 교정 <ol><li> 교정 소프트웨어 <ol><li> GitHub의 (16)에 제공된 &quot;endocal&quot;내시경 교정 소프트웨어 패키지를 설치(내부 README 파일의 지침에 따라). 참고 :이 소프트웨어는 사용하기 쉬운 편의 응용 프로그램에서 OpenCV의 카메라 보정 모듈 (17)을 래핑합니다. 제공되는 응용 프로그램은 두 가지 모드에서 실행 : 온라인과 오프라인. 온라인 모드는 호환 프레임 그래버 하드웨어에서 직접 비디오 스트림을 획득한다. 오프라인 모드 로딩 내시경 화상에 대해 하나의 비디오 파일이나 이미지 파일로 저장된 비디오 프레임의 번호와 폴더에서 허용한다. 지원되는 하드웨어 및 이러한 두 가지 모드를 사용하는 방법에 대한 자세한 지침은 README를 참조하십시오. </li></ol></li><li> 내시경 영상 획득 주 : (위에서 설명) 다음은 온라인 교정 있지만, 또한 오프라인에서 교정에 적용 가능하다. <ol><li> 이러한 gallipot 등의 살균 액체 용기에 보정 대상을 놓습니다. </li><li> 대상 유체 또는 유사한 살균 물질과 용기를 입력합니다. 참고 : 예를 들어, fetoscopic proce을에절차들 대상 유체는 양수이다. 양수의 광학 특성을 염수 (18, 19)과 유사하기 때문에, 살균 염수의 fetoscope을 교정에 이용 될 수있다. </li><li> 원하는대로 내시경의 줌과 선명도를 조정합니다. </li><li> 유체 내시경을 담그고 내시경 추후에 사용되는 인체로부터의 거리와 유사한 캘리브레이션 타겟으로부터 거리를 길게. </li><li> 보정 응용 프로그램을 시작하고 카메라 수집을 시작합니다. </li><li> 카메라의 관점에서 전체 교정 패턴을 유지하면서 다른 뷰에 대한 약간 내시경의 끝을 이동합니다. 최적의 성능을 위해 내시경의 원형보기 내에서 교정 패턴 주위에 타원형의 전설을 유지합니다. 참고 : 그림 3에서와 같이 교정에 사용할 수있는 비디오 프레임은, 가상 패턴 오버레이로 표시됩니다. </li><li> 아퀴합니다 (endocal 창에 표시된 바와 같이) 교정에 필요한 내시경 카메라 뷰의 적어도 최소 수 (Re). 참고 : endocal의 현재 버전은 교정 적어도 10 내시경 카메라 뷰, 교정 오류 최소화 및 안정적인 패턴 (20)을 따라 나타나는 뷰의 경험적으로 선택된 번호가 필요합니다. </li><li> endocal 창에 표시된 바와 같이, 지금까지 취득 된 화상을 사용하여 조정 프로세스를 시작하기 위해, 교정 키를 누른다. </li></ol></li><li> 보정 파라미터를 저장 및 사용 <ol><li> YAML의 결과 보정 파라미터를 저장하기 위해 지정된 교정 키를 누릅니다 ( &quot;YAML 언어를 마크 업하지 않는다&quot;) (21) 파일. </li><li> 그룹 OpenCV의 카메라 교정 모듈 (17)에서 설명한 바와 같이, 카메라 행렬 왜곡 계수로 보정 파라미터. 주 : 교정을 수행 한 후, 보정응용 프로그램이 자동으로 원래의 내시경 화상의 오른쪽에, 왜곡 보정 된 화상을 표시한다. </li><li> 순수한 시각화 또는 11 mosaicing 실시간 태반에 대한 fetoscopic 절차를 수행하는 동안 왜곡 보정 비디오 피드를 사용합니다. </li></ol></li></ol>

<ol><li>Zhang, Z., Matsushita, Y., Ma, Y. Camera calibration with lens distortion from low-rank textures. CVPR 2011 IEEE Conference on Computer Vision and Pattern Recognition, Washington, D.C., USA, , IEEE Computer Society. 2321-2328 (2011).</li>
<li>Devernay, F., Faugeras, O. D. Automatic calibration and removal of distortion from scenes of structured environments. SPIE's 1995 International Symposium on Optical Science, Engineering, and Instrumentation. 62-72 International Society for Optics and Photonics, , International Society for Optics and Photonics. 62-72 (1995).</li>
<li>Duane, C. B. <a target="_blank" href="https://www.researchgate.net/publication/2478035_Close-Range_Camera_Calibration">Close-range camera calibration.</a> Photogramm. Eng. 37 (8), 855-866 (1971).</li>
<li>Mallon, J., Whelan, P. F. <a target="_blank" href="http://doras.dcu.ie/18667/">Which pattern? biasing aspects of planar calibration patterns and detection methods.</a> Pattern recognition letters. 28 (8), 921-930 (2007).</li>
<li>Balletti, C., Guerra, F., Tsioukas, V., Vernier, P. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Calibration+of+Action+Cameras+for+Photogrammetric+Purposes%5BTitle%5D)+AND+%22Sensors%22%5BJournal%5D)">Calibration of Action Cameras for Photogrammetric Purposes.</a> Sensors. 14 (9), 17471-17490 (2014).</li>
<li>Heikkila, J. <a target="_blank" href="http://ieeexplore.ieee.org/document/879788/">Geometric camera calibration using circular control points.</a> IEEE Transactions on pattern analysis and machine intelligence. 22 (10), 1066-1077 (2000).</li>
<li>Deprest, J. A., et al. Fetal surgery is a clinical reality. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aDeprest%2C+JA+%22Seminars+in+fetal+and+neonatal+medicine%22">Seminars in fetal and neonatal medicine</a>. 15 (1), Elsevier. 58-67 (2009).</li>
<li>Watanabe, M., Flake, A. W. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Fetal+surgery%3A+Progress+and+perspectives%5BTitle%5D)+AND+%22Advances+in+pediatrics%22%5BJournal%5D)">Fetal surgery: Progress and perspectives.</a> Advances in pediatrics. 57 (1), 353-372 (2010).</li>
<li>Lewi, L., Deprest, J., Hecher, K. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((The+vascular+anastomoses+in+monochorionic+twin+pregnancies+and+their+clinical+consequences%5BTitle%5D)+AND+%22American+journal+of+obstetrics+and+gynecology%22%5BJournal%5D)">The vascular anastomoses in monochorionic twin pregnancies and their clinical consequences.</a> American journal of obstetrics and gynecology. 208 (1), 19-30 (2013).</li>
<li>Yamashita, H., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Miniature+bending+manipulator+for+fetoscopic+intrauterine+laser+therapy+to+treat+twin-to-twin+transfusion+syndrome%5BTitle%5D)+AND+%22Surgical+Endoscopy%22%5BJournal%5D)">Miniature bending manipulator for fetoscopic intrauterine laser therapy to treat twin-to-twin transfusion syndrome.</a> Surgical Endoscopy. 22 (2), 430-435 (2008).</li>
<li>Daga, P., et al. <a target="_blank" href="http://proceedings.spiedigitallibrary.org/proceeding.aspx?articleid=2505941">Real-time mosaicing of fetoscopic videos using SIFT.</a> Proc. SPIE 9786, Medical Imaging 2016: Image-Guided Procedures, Robotic Interventions, and Modeling. 97861R. , International Society for Optics and Photonics. (2016).</li>
<li>Yang, L., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Image+mapping+of+untracked+free-hand+endoscopic+views+to+an+ultrasound+image-constructed+3D+placenta+model%5BTitle%5D)+AND+%22The+International+Journal+of+Medical+Robotics+and+Computer+Assisted+Surgery%22%5BJournal%5D)">Image mapping of untracked free-hand endoscopic views to an ultrasound image-constructed 3D placenta model.</a> The International Journal of Medical Robotics and Computer Assisted Surgery. 11 (2), 223-234 (2015).</li>
<li>Liao, H., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Fast+image+mapping+of+endoscopic+image+mosaics+with+three-dimensional+ultrasound+image+for+intrauterine+fetal+surgery%5BTitle%5D)+AND+%22Minimally+invasive+therapy+%26+allied+technologies%22%5BJournal%5D)">Fast image mapping of endoscopic image mosaics with three-dimensional ultrasound image for intrauterine fetal surgery.</a> Minimally invasive therapy & allied technologies. 18 (6), 332-340 (2009).</li>
<li>Chadebecq, F., et al. Practical Dry Calibration With Medium Adaptation For Fluid-Immersed Endoscopy. Hamlyn Symposium on Medical Robotics, , (2015).</li>
<li>Wengert, C., Reeff, M., Cattin, P. C., Székely, G., et al. Bildverarbeitung für die Medizin 2006: Algorithmen Systeme Anwendungen. Proceedings des Workshops vom 19. - 21. März 2006 in Hamburg. Handels, H., et al. , Springer. Berlin Heidelberg. 419-423 (2006).</li>
<li>Shakir, D. I. Compact GUI application for optical distortion calibration of endoscopes. , Available from:
 <a target="_blank" href="https://github.com/gift-surg/endocal">https://github.com/gift-surg/endocal</a> (2016).</li>
<li>Camera calibration With OpenCV. , Available from:
 <a target="_blank" href="http://docs.opencv.org/2.4/doc/tutorials/calib3d/camera_calibration/camera_calibration.html">http://docs.opencv.org/2.4/doc/tutorials/calib3d/camera_calibration/camera_calibration.html</a> (2016).</li>
<li>Reeff, M., Gerhard, F., Cattin, P. C., Székely, G. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aReeff%2C+M+%22Mosaicing+of+endoscopic+placenta+images%22">Mosaicing of endoscopic placenta images</a>. , Citeseer. (2011).</li>
<li>Steigman, S. A., Kunisaki, S. M., Wilkins-Haug, L., Takoudes, T. C., Fauza, D. O. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Optical+properties+of+human+amniotic+fluid%3A+implications+for+videofetoscopic+surgery%5BTitle%5D)+AND+%22Fetal+diagnosis+and+therapy%22%5BJournal%5D)">Optical properties of human amniotic fluid: implications for videofetoscopic surgery.</a> Fetal diagnosis and therapy. 27 (2), 87-90 (2009).</li>
<li>Zhang, Z. <a target="_blank" href="http://ieeexplore.ieee.org/document/888718/">A flexible new technique for camera calibration.</a> IEEE Transactions on Pattern Analysis and Machine Intelligence. 22 (11), 1330-1334 (2000).</li>
<li>Evans, C. C. The Official YAML Web Site. , Available from:
 <a target="_blank" href="http://yaml.org">http://yaml.org</a> (2016).</li>
<li>Bouguet, J. -Y. Camera Calibration Toolbox for Matlab. , Available from:
 <a target="_blank" href="http://www.vision.caltech.edu/bouguetj/calib_doc/">http://www.vision.caltech.edu/bouguetj/calib_doc/</a> (2015).</li>
<li>Common Interfaces of Feature Detectors. , Available from:
	 <a target="_blank" href="http://docs.opencv.org/2.4/modules/features2d/doc/common_interfaces_of_feature_detectors.html">http://docs.opencv.org/2.4/modules/features2d/doc/common_interfaces_of_feature_detectors.html</a> (2016).</li>
<li>Open Source Computer Vision Library. , Available from:
 <a target="_blank" href="https://github.com/opencv/opencv">https://github.com/opencv/opencv</a> (2016).</li>
</ol>

저자는 공개할 것이 없습니다.

원료 금속 표면이 보이 불가능 원이 검출 될 때까지 만들어 내시경 광을 반사하기 때문에 샌드 블라스팅은 제조 프로세스에서 중요한 단계이다. 이는 심지어 육안으로 서클을 구별하기 어렵다 (도 5 참조). 도시 된 타겟 표면이 이미 레이저 에칭 있습니다. 그러나,이 빛의 반사를 감소하지 않습니다. <img alt="그림 5" src="/files/ftp_upload/55298/55298fig5.jpg" /> 그림 5 : 교정 대상없는 샌드와 함께 적용했다. 왼쪽에있는 내시경보기에서 알 수있는 바와 같이, 재료 표면에 내시경 빛의 섬광이 육안으로는 원을 구별하기조차 것이 어렵게 (그냥 대형 반사의 남동쪽에 원이있다). 이 타겟의 표면 (즉, 상기 &quot;배경&quot;) 이미 에칭 있는데, 이는 아니다<html> 샌드 블라스트의 부재 도움. <a href="http://ecsource.jove.com/files/ftp_upload/55298/55298fig5large.jpg" target="_blank">이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오.</a> 이전에 패턴을 에칭, 전체 시료의 표면을 에칭하는 것도 중요하다. 이것은 샌드 블라스트 표면 많은 거울 반사 때문에 얼룩 검출을 방해 (도 6 참조)이 필요하다. <img alt="그림 6" src="/files/ftp_upload/55298/55298fig6.jpg" /> 그림 6 : 없음 에칭 표면을 모래 분사. 원료 금속 표면 저명한되지 않았지만, (일부 노란 화살표로 강조된다) 비교적 작은 정반사 여전히 성공할 얼룩 검출을 방지하기에 충분하므로 캘리브레이션이 대상으로 수행 할 수 없다.arget = &quot;_ 빈&quot;&gt;이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오. 다른 속도로 레이저를 적용하는 것은 다른 배경 색상을 제공합니다. 배경색은 원과 배경 사이의 명암에 중요한 역할을한다. 따라서, 최적의 배경색을 결정하기 위해 필수적이다. 이를 위해, 동그라미와 플레이트는 생성 된 다른 배경 (그림 7 참조)의 집합에 대해 에칭. 배경에는는 OpenCV의 카메라 교정 모듈 (17)에서 사용된다 OpenCV의 23의 특징 검출 모듈을 사용하여 시험 하였다. 그것은 의료 기기 병원에서 가장 일반적으로 안정적인 재료이기 때문에,이 작업에서, 타겟은 스테인레스 강으로 만들어졌다. 이 자료는 자유롭게, 비싸지 않은, 사용 가능한 강력한 및 소독이 용이하다. 다른 재료는 잠재적으로 알루미늄 또는 요오드화 금속으로, 보정 대상에 사용될 수 있지만, 이것은 SCOP 인향후 작업의 전자. <img alt="그림 7" src="/files/ftp_upload/55298/55298fig7.jpg" /> 그림 7 : 레이저 에칭 다른 배경 색상의 팔레트를 갖춘 스테인레스 강판. 실제 실험 블롭 대 배경 콘트라스트 (23)의 측면에서 최적의 결과를 제공하는 배경 색상을 결정하는 기능을 OpenCV 검출 모듈과 연계하여 수행 하였다. 왼쪽의 내시경보기는 판을 보여줍니다. 적당한 배경 색상 (즉, 다른 그 가장 어두운 부분과 밝은 사람 있음)이 팔레트에 더 얼룩 검출을 얻었다. <a href="http://ecsource.jove.com/files/ftp_upload/55298/55298fig7large.jpg" target="_blank">이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오.</a> 이 작업의 장점 중 하나는 제조 된 표적을 사용하여 교정을 수행하는 2-3 분 소요된다. 노력의 대부분은 이동ES 수동 교정 패턴의보기 흉 수득 내시경을 안정화한다. 맞춤식 내시경 홀더를 사용하면 결과적으로 크게 보정 시간을 단축 할 수있는 수동 안정화에 대한 필요성을 제거 할 수있다. <img alt="비디오 1" src="/files/ftp_upload/55298/55298video1.jpg" /> 비디오 1 : 비디오는 endocal 소프트웨어와 함께 개발 보정 대상을 사용하여 수행 될 수있는 방법을 보여주는 광학 왜곡 보정. <a href="http://ecsource.jove.com/files/ftp_upload/55298/fetoscope-calibration-480.mov" target="_blank">이 동영상을 보려면 여기를 클릭하십시오. (다운로드 마우스 오른쪽 버튼으로 클릭합니다.)</a> 벵거 르트 등의 등의 작업에 비해 우리의 작업의 장점. 15 OpenCV의 카메라 교정 모듈 (17)은 임의의 수정 또는 사용자 parame 없이도 교정 그대로 사용할 수 있다는terization. OpenCV의 잘 확립하고 잘 관리 소프트웨어 패키지이며 쓰고 커스텀 소프트웨어를 유지하기위한 필요성을 제거하여, 컴퓨터 비전 사회에서 매우 인기가 있기 때문이다. 독자의 편의를 위해, 소형의 GUI 애플리케이션은 독자가 쉽게 설치하고 새로운 캘리브레이션 타겟을 테스트하는 데 사용할 수있는, (16)이 제공된다. 벵거 르트 등에 비교하여 제안 된 방법의 단점. 도 15은 모든 얼룩의 검출을 필요로하지 않기 때문에 그 방법은, 패턴의 폐색에 더 견고하다는 것이다. 처음에, 바둑판 패턴으로 보정 대상이 일을 위해 제작 하였다. 그러나, 보정 대상이 유형 의한 바둑판 사각형의 모서리를 검출하는 어려움 실험 부적합한 것으로 판명되었다. 코너 검출은 히스토그램 기반의 이미지 이진화합니다 (OpenCV의 소스 코드 24 참조)에 의존한다. 이 꼬마 도깨비도 6에 도시 된 것과 같은, 부분적으로 거울 반사에, 우리의 바둑판 패턴을 보장 할 수없는 어둠과 빛 사각형 사이의 명확한 색상 대비의 필요성이있다. 이러한 거울 반사 심지어 배경 에칭 후 존재; 그러나, 원형의 검출은 이러한 단점에 덜 민감한 것으로 보인다. 현재의 설정으로, 보정 대상의 수직보기 성공 얼룩 검출 허용한다. 이 경사 각도 얼룩 검출 방해 대상 표면에서 정반사에 기인한다. 우리는 잠재적으로 교정을 수행 (20)의 품질을 개선 할 수있는 각도의 넓은 범위에서 뷰의 획득이 가능하도록 상기 대상을 개선하기 위해 노력하고있다. 실시간 태반 이전 11 제안한 파이프 라인 트랜스의 계산 mosaicing이미지 쌍을 매핑 형성은 성공적으로 탐지 및 기능의 그룹에 의존합니다. 광학 왜곡, 다른 한편으로는, 강성 구조와 기능의 그룹은 이미지에 걸쳐 상이한 나타나게. 결과적으로, 이러한 차이는 생성 된 화상의 모자이크 드리프트 원인 계산 된 변형에 부정확성을 이끈다. 가장 눈에 띄는 광학 왜곡 가장자리쪽으로 존재하기 때문에, 내시경 이미지는 현재 자신의 가장 깊은 지역에 잘립니다. 광학 왜곡에 대한 좋은 보정은 잠재적으로 mosaicing 프로세스에 각 이미지의 더 큰 부분의 결합을 허용합니다. 이 방법의 장점은 두 가지이다. 첫째, 잠재적으로 화상 변환의 계산을 개선 각 이미지에서 검출 기능의 수를 증가시킬 것이다. 둘째, 짧은 시간에 재구성 될 전체 목표 해부학 표면을 허용한다.

<html> 카메라 보정 집중적 년 1, 2, 3을 통해 연구되어왔다 컴퓨터 비전 분야에서 잘 알려진 문제이다. 카메라 교정 방법의 주요 단계는 서브 픽셀 정밀도로 카메라 영상에서 알려진 형상과 점의 격자를 추출하여, 왜곡 모델의 파라미터뿐만 아니라 고유 카메라 파라미터를 추정하는 것이다. 검은 색과 흰색 사각형을 특징으로 바둑판 패턴으로 교정 대상은 일반적으로이 목적을 위해 사용됩니다. 원형 모양은 다른 패턴 4, 5, 6 제안한다. 최근 태아 그러한 쌍태아 간 수혈 증후군 (TTTS)의 치료와 같은 태아 수술 절차, 수술 용 항법 기술의 개발에 대한 관심이 증가되고있다&gt; 7, 8, 9, 10. fetoscope의 시야로서 (즉, 태아의 수술에 사용되는 내시경은) 매우 외부 추적기를 사용하지 않고 태반 혈관계를 매핑하는 방법이 TTTS 수술 11, 12, 13를 돕기 위해 제시되었다 한정된다. fetoscopic 이미지 내의 광학 왜곡 시각 정보 추출 (11)에 의존하는 이러한 계산 mosaicing 방법에 부정적 영향을 미칠. 따라서, 광학 왜곡 보상 개입 동안에 실시간으로 수행 할 수 있도록 동작 가능 주위염이-fetoscopes 교정을위한 비용 효율적이고 빠른 도구에 대한 충족되지 않은 필요성이 존재한다. 인해 fetoscope가 개입 동안에 양수에서의 굴절률 차이를 침지된다는 사실IR 및 양수는 태아 수술 절차에 적합 고전에서 공기 카메라 교정 방법을 렌더링합니다. 공기 중 카메라 파라미터로부터 유체 침지 카메라 파라미터를 추정하는 것은 매우 어려운 일이며, 유체 침지 보정 대상 (14)의 적어도 하나의 이미지를 필요로한다. 또한, 요정 수술은, 유체 침지 fetoscopic 카메라 보정은 운영 극장에서 허용되는 물질에 살균 요구 사항 및 제한 사항으로 인해 현재 불가능하다. 때문에 이러한 이유로, 광학 왜곡 내시경을 교정하는 것은 일반적으로 현재 임상 워크 플로우의 일부가 아닙니다. 이 원고의 작업은 설계 및 비대칭 원의 패턴을 특징으로 멸균하고 실용적인 광학 왜곡 보정 대상을 생산하여 카메라 교정 격차를하기위한 시도이다. 이전 벵거 르트 등. 캘리브레이션 타겟으로서 산화 알루미늄 판을 갖춘 맞춤 교정 장치를 제작. 그들의 메트OD, 단, 그들은 15 개발 된 맞춤형 교정 알고리즘과 연계하여 작동한다.

<table><tbody><tr><td>1.2mm 금속 시트 316 등급, 40mm x 40mm</td><td></td><td></td><td></td></tr><tr><td>물통 최소 50mm x 50mm x 30mm</td><td></td><td></td><td></td></tr><tr><td>살균 패키지</td><td></td><td></td><td></td></tr><tr><td>식염수</td><td></td><td></td><td></td></tr><tr><td>수동 금속 절단기</td><td></td><td></td><td></td></tr><tr><td>모서리</td><td></td><td></td><td></td></tr><tr><td>를 둥글게 만드는 파일50mm x 50mm, 최소 10mm 두께</td><td></td><td></td><td></td>의 나무 또는 금속 블록</tr><tr><td>바이스(바람직하지만 필수는 아님)</td><td></td><td></td><td></td></tr> <tr><td></td>패턴<td></td><td></td><td>으로 .dxf 파일을 생성하는</td></tr> <tr><td>샌드 블라스팅 기계</td><td></td><td></td><td></td></tr> GUI 응용 프로그램 https://github.com/gift-surg/endocal <tr><td>PC</td><td></td><td></td><td></td></tr><tr><td>레이저 커터</td><td></td><td></td><td></td></tr><tr><td>오토클레이브</td><td></td><td></td><td></td></tr><tr>GitHub의<td>내시경 보정 소프트웨어</td><td></td><td></td><td>: https://github.com/gift-surg/endocal</td></tr><tr><td>내시경</td><td></td><td></td><td></td></tr><tr><td>OpenCV 카메라 보정 모듈</td><td></td><td></td><td>http://docs.opencv.org/2.4/doc/tutorials/calib3d/camera_calibration/camera_calibration.html</td></tr><tr><td>안전 고글</td><td></td><td></td><td></td></tr><tr><td>실험실 가운</td><td></td><td></td><td></td></tr><tr><td>눈금자와 마커</td><td></td><td></td><td></td></tr><tr><td>먼지 제거 및 청소</td><td></td><td></td><td></td>를 위한 알코올(바람직하게는 에탄올)</tr></tbody></table>

유체 - 침지 fetoscope 광학 왜곡 보정 의료 수준의 소독 가능 대상

Medical-grade Sterilizable Target for Fluid-immersed Fetoscope Optical Distortion Calibration

우리는 GIFT-Surg(Guided Instrumentation for Fetal Therapy and Surgery) 프로젝트의 맥락에서 유체 침지 내시경과 함께 사용하기 위한 보정 대상을 개발했습니다. 이 프로젝트의 목표 중 하나는 이분척추증(spina bifida) 및 쌍둥이 수혈 증후군(twin-to-twin transfusion syndrome)과 같은 선천적 선천적 결함 치료에 수술 중 사용할 수 있는 새로운 실시간 이미지 처리 방법을 설계하는 것입니다. 개발된 표적은 몇 분 내에 내시경의 멸균 보존 광학 왜곡 보정을 가능하게 합니다. 우수한 광학 왜곡 보정 및 보정은 방사형 왜곡과 같은 바람직하지 않은 효과를 완화하는 데 중요하며, 이는 태아 수술 중 기존 내시경 기술을 사용한 정확한 이미징을 방해할 뿐만 아니라 실시간 모자이킹과 같은 잠재적으로 매우 유용한 이미지 컴퓨팅 응용 프로그램에 획득된 이미지를 덜 적합하게 만듭니다. 이 백서에서는 임상 환경에서 사용하기에 적합한 저렴하고 멸균 가능한 보정 대상을 만들기 위한 새로운 제조 방법을 제안합니다. 이 방법은 샌드블라스팅된 스테인리스 강판을 레이저로 절단하여 보정 패턴을 에칭하는 것입니다. 이 대상은 컴퓨터 비전 커뮤니티에서 인기 있는 최첨단 소프트웨어 라이브러리인 OpenCV에서 제공하는 카메라 보정 모듈을 사용하여 검증되었습니다.

우리는 그 디자인을도 1에 도시 된 샌드 블라스트 스테인리스 금속판에 비대칭 원형의 패턴을 에칭에 의해 멸균 보정 대상을 만들었다. fetoscope와 함께 행동이 교정 대상을 보여주는 모범 설정은 그림 2에 표시됩니다. 레이저 에칭 소프트웨어에이 디자인을 공급하기 위해, 사용자 지정 응용 프로그램은 파이썬 프로그래밍 언어 (16)로 구현되었다. 디자인 패턴을 만들기 반복적으로 금속 시트에 평행선을 에칭 포함한다. 패턴은 결국 일정한 색을 갖고, 이들 라인들 사이의 거리가 상기 레이저 빔의 폭보다 작아야한다 (도 1의 인셋 참조) 값 Violino (Laservall) 레이저 커터 45 μm의 인격적. <img alt="그림 1" src="/files/ftp_upload/55298/55298fig1.jpg" /> <st<html> 룽&gt; 그림 1 : 비대칭 원의 3 별 11 그리드를 특징으로 새겨진 패턴의 디자인. 삽입은 : 확대 된 비대칭 원의 격자보기. 라인 사이의 거리 (레이저 빔의 폭과 동일) 45 ㎛의이며, 각각의 원이 1mm의 직경을 갖는다. 다른 크기도 격자에 사용될 수 있지만, 이는 도면의 fetoscope 필드에 대해 최적 인 것으로 밝혀졌다. <a href="http://ecsource.jove.com/files/ftp_upload/55298/55298fig1large.jpg" target="_blank">이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오.</a> <img alt="그림 2" src="/files/ftp_upload/55298/55298fig2.jpg" /> 그림 2 : 사용중인 보정 대상으로 모범 설정. 물 침지 fetoscope의 선단 오른쪽 보정 대상에 관한 것이다. 왼쪽의 스케일 정보를 제공하는 영국 페니이다.&quot;대상 =&quot;_ 빈은 &quot;&gt;이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오. 제작 된 보정 대상이 위치 다음 미리 정의 된 비대칭 원형 격자로 정렬 OpenCV의 (17)와 내시경 비디오 스트림에 원형 패턴의 검출을 가능하게 (도 3 참조). 이미 공지 된 격자 형상과 함께이 정보를 이용하여 카메라의 내부 파라미터를 추정 할 수있다. 이러한 카메라 행렬 왜곡 계수들을 포함한다. 카메라 행렬은 초점 거리와 2 차원 화상면의 X 및 Y 축 방향의 광학 중심 구성된다. 왜곡 계수는 브라운 - Conrady 모델 3을 기반으로합니다. 이 일을 위해, 단지 반경 왜곡 매개 변수를 추정되었다합니다. 실제 사례와 이론에 대한 간단한 설명을 보려면, &lt;OpenCV의 카메라 보정 모듈의 웹 페이지를 참조하십시오SUP 클래스 = &quot;외부 참조&quot;&gt; (17)과 MATLAB 카메라 보정 도구 상자 22. 카메라 보정 절차에 대한 자세한 내용은 장의 작품 20에서 사용할 수 있습니다. endocal 소프트웨어 저장소는 제작 된 보정 대상 16 10 내시경 전망의 샘플 데이터 세트를 제공합니다. (0.16, 최대 : 0.45 분)이 데이터 집합, 0.28 화소의 평균 재 투영 오차 보정을 사용하여 얻었다. 이것은 벵거 르트 등에 의해보고 0.25 픽셀과 비교된다. 자신의 사용자 정의 교정 알고리즘 (15)를 사용. 태반 18 mosaicing에 이용하는 내시경 카메라 교정 15의 방법을 이용하면 동일한 연구 그룹은, 그러나, 최근의 논문에서 0.6 화소 재 투영 오차를보고했다. <img alt="그림 3" src="/files/ftp_upload/55298/55298fig3.jpg" /> <st룽&gt;도 3 : 계측 패턴의 실시간 검출. 검출 된 교정 패턴을 특징으로 보정 응용 프로그램 (16)에서 스크린 샷은 OpenCV의 17에서 가상 현실 시각화를 사용하여 라이브 비디오 스트림을 입혔다. 교정 패턴의 각각의 검출 된 열이 다른 색으로 강조합니다. 검출 원은, 공지 된 구조와 함께, 카메라 파라미터를 계산하기 위해 사용된다. <a href="http://ecsource.jove.com/files/ftp_upload/55298/55298fig3large.jpg" target="_blank">이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오.</a> 추정 된 카메라 파라미터 광학 왜곡 보정을 위해 사용된다. 광학 왜곡 선이 곡선으로 표시 할 fetoscope를 사용하여 볼 때 그림 4는 직사각형 체스 판 패턴을 보여줍니다. 라인이 distorti 정상 표시합니다이미지에 보정. <img alt="그림 4" src="/files/ftp_upload/55298/55298fig4.jpg" /> 그림 4 : 광학 왜곡 보정. 왜곡 보정 이미지 (오른쪽)와 체크 무늬 패턴 (왼쪽)에서 fetoscope 녹화에서 라이브 영상을 특징으로 보정 응용 프로그램 (16)에서 스크린 샷. 세 가지 예시적인 선은 궤도 선형 또 다른 한 구석에서 각각 두 이미지에 그려집니다. 때문에 광학 왜곡에,이 라인은 원래 fetoscope 이미지에 곡선으로 나타납니다. <a href="http://ecsource.jove.com/files/ftp_upload/55298/55298fig4large.jpg" target="_blank">이 그림의 더 큰 버전을 보려면 여기를 클릭하십시오.</a>

이 기사는 내시경 중재술 중 내시경의 수술 전후 유체 침지 보정을 위한 멸균 가능한 맞춤형 카메라 광학 왜곡 보정 대상의 설계 및 개발에 대해 설명합니다.

유체 - 침지 Fetoscope 광학 왜곡 보정 의료 수준의 소독 가능 대상

We have developed a calibration target for use with fluid-immersed endoscopes within the context of the GIFT-Surg (Guided Instrumentation for Fetal ...

본 프로젝트의 목적은 임상의가 수술실에서 사용할 수 있는 멸균 가능한 내시경 카메라 보정 장치를 개발하는 것입니다. 인간 심혈관 차트의 실시간 추적과 같은 의료 영상 기법은 현재 광학적 왜곡 현상을 겪고 있으며, 이는 표준화된 보정 과정을 통해 완화될 수 있습니다. 이 장치는 쌍태아 수혈 증후군과 같은 태아 수술 절차에 사용되는 내시경의 수술 중 보정을 위한 빠르고 실용적인 도구로 활용될 수 있습니다.샌드블라스팅을 하기 전, 자를 사용하여 1.2 mm 두께의 316 스테인리스강 판 위에 40 by 40 mm 크기의 정사각형을 그립니다. 그런 다음 수동 금속 절단기로 정사각형을 잘라내고, 줄(file)을 사용하여 시편의 모서리와 측면을 둥글게 다듬습니다. 다음으로, 정사각형 시편보다 약간 더 큰 1~2 cm 두께의 블록 위에 스테인리스강 시편을 배치합니다.바이스 하나를 사용하여 샘플을 블록에 고정하고, 다른 바이스를 사용하여 샌딩 과정 동안 블록의 가장자리에서 샘플을 단단히 잡습니다. 그런 다음 전체 어셈블리를 내부 블래스트 챔버로 옮겨 압축 공기 흐름을 켜고 챔버를 단단히 밀봉합니다. 이어서 보안경을 착용하고 블래스트 건을 금속 표면에 수직이 되도록, 그리고 최소 4~5cm 떨어진 위치에 배치합니다.다음으로 풋 컨트롤러를 사용하여 샘플을 샌드블래스팅하십시오. 그런 다음 필요에 따라 방금 시연한 것과 같이 반대쪽 면도 샌드블래스팅하십시오. 샘플의 레이저 패터닝을 위해서는 먼저 비대칭 원형 패턴을 설계하고, 적절한 디자인 소프트웨어를 사용하여 해당 설계의 DXF(drawing exchange format) 파일을 준비하십시오.파일을 레이저 커팅 소프트웨어로 불러온 후 배경 식각 및 식각 패턴 외곽선을 설정하십시오. 스마트est 소프트웨어의 레이저 탭으로 이동합니다. 재료로 스테인리스강을 선택하면 사전 정의된 외곽선이 나타납니다.출력, 샷 빈도, 스캔 속도 및 perimeter당 패스 횟수를 적절히 조정하십시오. 필요한 경우 식각할 패턴의 X 및 Y 위치를 조정하십시오. 사각형의 끝단을 사용하여 패턴을 인식하려면 블록과 배경의 색상을 최적화해야 합니다.패터닝을 시작하기 전에 레이저의 정확한 성능과 주변부 설정을 확인해야 합니다. 다음으로, 샘플을 작업 플랫폼 위에 놓고 Z축 명령 창을 사용하여 레이저 높이를 조절함으로써 샘플 표면의 초점을 맞춥니다. 소프트웨어에서 시작 테스트 옵션이 활성화되었는지 확인하고, 레이저 패널의 레이저 다이오드를 켠 다음 레이저 높이를 조정하십시오.테스트 지점이 다이오드 레이저 스폿과 일치할 때 레이저의 초점이 정확히 표면에 위치하게 됩니다. 소프트웨어를 사용하여 절단 패턴을 정렬하십시오. 패턴 샘플을 알코올에 담가 표면을 세척하십시오.그런 다음 샘플을 멸균 패키지로 감싸 오토클레이브 멸균을 준비합니다. 내시경을 교정하려면 먼저 GitHub에서 제공하는 Endocal 내시경 교정 소프트웨어 패키지를 설치하십시오. 그런 다음 갤리팟(gallipot)과 같은 멸균 액체 용기에 교정 타겟을 넣습니다.용기에 대상 액체를 채우고 내시경의 줌과 선명도를 원하는 대로 조정합니다. 다음으로 내시경을 액체에 담그고, 나중에 내시경을 사용할 때와 유사한 거리로 보정 타겟과 간격을 유지합니다. 이제 보정 애플리케이션을 실행하고 카메라 획득을 시작하며, 전체 보정 패턴이 카메라 시야에 들어오도록 유지하면서 내시경 팁을 약간씩 움직여 다양한 뷰를 확보합니다.Endocal 창에 표시된 대로 캘리브레이션에 필요한 최소 횟수의 내시경 카메라 뷰를 획득하십시오. 이 멸균 가능한 캘리브레이션 타겟은 이 이미지들에 표시된 것처럼 샌드블라스팅 처리된 스테인리스 스틸 시트에 비대칭 원형 패턴을 사용하여 제작되었습니다. 패턴이 최종적으로 일관된 색상을 갖기 위해서는 선 사이의 거리가 레이저 빔의 너비보다 작아야 합니다.여기 내시경을 사용해 이 보정 타겟을 실제로 설정한 예시가 나와 있습니다. 제작된 보정 타겟을 통해 open CV로 내시경 비디오 스트림 내의 원형 블롭(blob)을 검출할 수 있습니다. 검출된 위치들은 미리 정의된 비대칭 원형 그리드 기하구조로 분류되며, 이후 광학 왜곡 파라미터를 추정하는 데 사용됩니다. 추정된 파라미터를 사용하여 광학 왜곡을 보정할 수 있습니다.예를 들어, 직사각형 체스판 패턴의 대표적인 내시경 뷰에서 광학적 왜곡으로 인해 직선이 곡선으로 보입니다. 그러나 왜곡 보정 후에는 직선이 정상적으로 나타납니다. 이 기술을 통해 쉽게 구할 수 있는 의료 등급 재료로 내시경 카메라 보정용 멸균 가능 장치를 저렴하게 제작할 수 있습니다.본 연구의 긍정적인 결과를 바탕으로, 최소한의 사용자 상호작용만으로 작동하는 완전한 형태의 인체공학적 보정 장치 개발을 추진하고 있습니다. 이러한 제작 방법은 내시경 카메라의 멸균 가능성을 보정 과정 중에 어떻게 유지할 수 있는가와 같이 해석학적 의료 영상 분야의 핵심 질문들에 답하는 데 도움이 될 수 있습니다. 당사의 보정 장치는 Open CV와 같은 최신 카메라 보정 소프트웨어와 호환되므로, 다양한 잠재적 임상 소프트웨어 애플리케이션에 장치를 통합하는 복잡성을 더욱 줄여줍니다.

medical-grade-sterilizable-target-for-fluid-immersed-fetoscope

Research

연구

JoVE Journal

Bioengineering

생명공학

여기에서는 미세유체 장치에서 혼합 불균일성을 측정하기 위해 마이크로 스케일 슐리에렌 기술을 사용하는 절차를 설명합니다. 보정을 통해 농도 구배의 분포는 micro-schlieren 이미지에서 파생될 수 있습니다.

마이크로 스케일 슐 리렌 기술에 의해 미세 유체 소자 믹싱 비균질성 분석

우리는 체적 신경 전달 물질 방출의 광학 검출을위한 셀 기반의 신경 전달 물질의 형광 설계 기자 (CNiFERs)를 만들 수있는 프로토콜을 제시한다.

건설 셀 기반의 신경 전달 물질의 광학 검출을위한 신경 전달 물질 형광 엔지니어링 기자 (CNiFERs)<em&gt; 생체</em

우리는 혈전 형성을 폐쇄하는 시간을 모니터링하는 생체 내에 현미경을 사용하여 효율적 특징으로하는 정제 된 철 클로라이드 (50ml을) 경동맥 및 장간막 동맥에 유도 된 혈전증 모델의 절차뿐만 아니라 정맥을보고한다.

철 염화물에 의한 쥐 혈전증 모델

현실적인 모델에 anastomoses로 간주 지금이 절차와 관련 된 가파른 학습 곡선을 극복 경험이 적은 외과 보조 할 수 있다 태 반 monochorionic의 fetoscopic 레이저 응고에 필요한 특정 기술을 연습 트윈 트윈 수혈 증후군에 대 한 치료의 표준.

Monochorionic Diamniotic 트윈 태 현실 시뮬레이터를 사용 하 여의 Fetoscopic 레이저 Photocoagulation에서 모델 외과 교육: 기술 습득

여기에 설명된 것은 각진 관상 접근 법을 사용하여 도전적이고 도달하기 어려운 뇌 영역(공간 제한으로 인해)을 표적으로 할 수 있는 입체적 절차입니다. 이 프로토콜은 마우스와 쥐 모델에 모두 적응할 수 있으며, 바이러스 구조의 캐뉼라 이식 및 미세 주입을 포함하여 다양한 신경 과학 응용 분야에 적용 될 수있다.

다목적 신경 과학 기술을 위한 적응가능한 각진 입체 적 접근 법

우리는 복부 측에서 성인 마우스의 뇌간을 노출하는 프로토콜을 제시합니다. 소형 현미경을 가진 그라데이션 굴절 지수 렌즈를 사용하여, 칼슘 화상 진찰은 생체 내의 열등한 올리브 신경 소마타의 활동을 검사하기 위하여 이용될 수 있습니다.

생체 내 마우스 열등올리브의 칼슘 이미징

오픈 글로브 눈 부상은 시골 또는 군사 관련 시나리오에서 며칠 동안 치료되지 않을 수 있으며, 그 결과 실명이 발생할 수 있습니다. 시력 상실을 최소화하기 위해 치료법이 필요합니다. 여기서, 우리는 장기 문화 오픈 글로브 부상 모델을 자세히 설명합니다. 이 모형을 사용하면 이러한 부상을 안정화하기위한 잠재적 인 치료법을 적절하게 평가 할 수 있습니다.

오픈 글로브 부상 및 치료 성능을 추적하기위한 전방 세그먼트 장기 문화 플랫폼

우리는 경내 주입 후 눈에 리포좀의 스파티오 측두분포를 비침습적으로 연구하기 위해 광섬유 공초점 레이저 미세 내시경 검사(CLM)의 사용을 위한 프로토콜을 제시한다.

광섬유 공초점 레이저 미세 내시경 검사를 사용하여 안구 약물 전달 시스템의 생체 내 측두 체 이미징

이 원고는 계면 형태를 시각화하면서 계면 장력과 표면 팽창 유변학을 동시에 측정하기 위해 마이크로 텐시오미터 / 공초점 현미경의 설계 및 작동을 설명합니다. 이것은 기술 및 생리학에서 중요한 인터페이스의 구조 - 속성 관계의 실시간 구축을 제공합니다.

동적 인터페이스의 공초점 현미경 시각화를 위한 마이크로텐시오미터

우리는 압축 시험을 사용하여 접안렌즈의 유효 탄성 계수를 특성화하기 위한 자동화된 방법을 제시합니다.

접안 수정체의 자동 압축 검사

학습하세요 내시경 카메라의 광학 왜곡 보정을 위한 멸균 가능한 교정 타겟 개발 방법을. 이 장치는 수술실에서 신속하고 실용적인 교정을 가능하게 하여 태아 수술 등의 임상 환경에서 정확한 영상 획득을 지원합니다.

유체 - 침지 Fetoscope 광학 왜곡 보정 의료 수준의 소독 가능 대상

더 많은 동영상 탐색