Name: 디지털 프린지 프로젝션 기술을 사용한 고해상도, 고속, 3차원 비디오 이미징 (동영상) | JoVE Journal
Uploaded: 2013-12-03T13:10:00.000+00:00
Duration: 11 min 34 s
Description: 학습하세요 디지털 프린지 투영 기술을 사용한 고해상도 고속 3차원 비디오 촬영 방법을. 이진 디포커싱 시스템으로 실시간 동적 표면 측정이 가능하며 의료 영상 및 모션 캡처에 활용됩니다.

ai_agent_IP

ai_agent

maintenance

instantTrialDurationMinutes

isBiopharma

enableNewMyJoveSectionDesign

educationFeatures

seoMetaApi

ai_copilot_institution_blacklist

ai_chat_institution_blacklist

freeAccessWindow

ssoRoleCapture

scheduledMaintenanceBanner

joveLabsFeatures

disable_autoplay_for_bots

extended_trial_duration

5 minutes

이 연구는 10여 년 전 Dr. Zhang은 Stony Brook University의 대학원생이었습니다. 아이오와 주립 대학 팀의 현재 및 이전 학생들은 이 기술을 오늘날의 위치로 발전시키는 데 엄청난 기여를 했습니다. 이 작업은 프로젝트 번호 CMMI 1150711로 National Science Foundation과 William and Virginia Binger Foundation의 일부 후원을 받았습니다.

1. 시스템 구성
시스템의 개략도는 그림 1에 나와 있습니다.
<ol>
	<li>투영을 위한 프린지 패턴을 생성합니다. MATLAB, OpenCV 또는 QT와 같은 이미지 프로그래밍 환경을 사용하여 미리 준비할 수 있습니다.18의 3단계 위상 이동 알고리즘에 따라 패턴을 구성합니다. 서로 2π/3씩 위상 오프셋이 이동된 세 개의 이미지를 만듭니다. 이진 디포커스의 경우,19에 설명된 대로 디더링 기법을 사용하여 검은색 및 흰색 픽셀만 사용하여 정현파 패턴을 생성합니다.</li>
	<li>디지털 광 처리 프로젝터를 선택합니다. 고속 바이너리 디포커스 시스템에는 ALP 고속 모듈이 있는 DLP LightCommander와 같은 더 빠르고 전문화된 프로젝터가 필요합니다. 이진 또는 단색 설정을 사용하여 fringe 이미지를 투사해야 합니다. 이미지 값은 순전히 켜져 있거나 꺼져 있기 때문에 비선형성 조정이 필요하지 않습니다. 프로젝터의 소프트웨어 프로그램을 활용하여 위상 이동을 위한 패턴을 업로드합니다.</li>
	<li>카메라를 선택합니다. 시스템에 적합한 캡처 속도를 가진 흑백 CCD 또는 CMOS 카메라를 선택하십시오. 색상은 필요하지 않고 컬러 카메라에는 비선형성 및 감마 조정이 필요하므로 3D 캡처를 위해 컬러 카메라를 사용하지 마십시오. 카메라는 각 3D 비디오 프레임에 대해 전체 fringe 이미지 세트를 캡처해야 합니다. 고품질 사인파 시스템은 프로젝터와 카메라 간의 정밀한 동기화가 필요합니다. 이진 디포커스 시스템의 경우 이 요구 사항이 더 완화됩니다20.</li>
	<li>원하는 최대(x, y) 범위와 프로젝터에서 물체까지의 거리(d0)를 결정합니다. 응용 프로그램에 적합한 범위를 선택하되 광학 경계 효과를 줄이기 위해 영역이 피사체보다 약간 더 큰지 확인하십시오. 프로젝터의 광 출력은 절두체이기 때문에 이 (x, y) 범위는 d0을 구동합니다. 원하는 범위(x, y)를 찾을 때까지 프로젝터를 큰 평면 프로젝션 표면을 기준으로 이동한 다음 줄자로 d0을 측정합니다.</li>
	<li>적절한 초점 거리의 카메라 렌즈를 선택하십시오. 카메라의 센서 크기를 사용하여 거리 d0에서의 시야가 원하는 이미징 범위(x, y)와 동일한 초점 거리를 찾습니다.</li>
	<li>프로젝터와 카메라 사이의 이격 거리를 결정합니다. 여기서 노이즈와 섀도잉 사이에 트레이드 오프가 발생합니다. 이러한 구성 요소 사이의 큰 각도에서는 특징점 간의 삼각 측량이 더 분명하지만 카메라의 관점에서 그림자에 가려져 손실되는 기능이 더 많습니다. 각도가 작으면 삼각분할이 어려워져 결과의 노이즈가 증가합니다. 일반적으로 10-15°가 좋은 절충안입니다.</li>
</ol>
2. 시스템 캘리브레이션
이 기준면 보정은 시스템에 대한 가장 간단하고 쉽게 액세스할 수 있는 보정 방법입니다. 따라서 시작하는 것이 가장 좋습니다. 보다 정확한 보정 방법은 특정 정현파16 및 이진 디포커싱17 응용 분야에 대한 문헌에서 사용할 수 있습니다. 정확도를 극대화하려면 데이터 캡처 직전에 보정을 수행해야 합니다. 보정 후 카메라와 프로젝터가 서로에 비해 이동하지 않아야 합니다.
<ol>
	<li>프로젝터의 초점을 맞추거나 초점을 해제합니다. 이미징 평면의 패턴이 고품질 정현파와 유사해질 때까지 프로젝션 렌즈의 초점을 조심스럽게 흐리게 합니다. 이를 위해서는 데이터 품질을 검사하고(섹션 4) 렌즈를 조정하는 반복적인 프로세스가 필요할 수 있습니다.</li>
	<li>참조 평면의 언저리 이미지를 캡처합니다. 평평한 화이트 보드를 프로젝터의 초점면과 카메라의 시야에 놓습니다. 3/16인치(5mm) 두께의 흰색 폼 코어 보드는 시스템을 향한 표면이 광택이 있거나 크게 흠집이 있거나 찢어지지 않은 경우 잘 작동합니다. 데이터 처리 단계를 위해 이 보드의 fringe 이미지를 기록하고 저장합니다.</li>
	<li>알려진 치수의 참조 객체의 fringe 이미지를 캡처합니다. 이 단계에서는 경질 폼 큐브가 하나의 간단한 예입니다. 큐브를 1/16인치(1.5mm) 흰색 접착 폼으로 정사각형으로 덮어 분산시킵니다. 카메라의 시야각에서 카메라의 초점면에 놓고 처리 단계를 위해 fringe 이미지를 기록합니다.</li>
</ol>
3. 데이터 수집
<ol>
	<li>물체를 놓거나 피사체가 카메라의 초점면에 앉도록 합니다. 인간 피험자의 경우 프로젝터 조명이 밝을 수 있음을 경고하십시오. 피사체 뒤에 검은색 천 배경을 사용하여 외부 환경을 숨길 수 있습니다.</li>
	<li>카메라 조리개를 조정하여 조명 수준을 최적화합니다. 샘플 fringe 이미지는 가능한 한 밝아야 하지만 채도가 높아서는 안 됩니다. 어두운 이미지에는 노이즈가 너무 많고 이미지의 채도 영역(최대 밝기의 중요한 영역)은 채도 영역의 세부 정보가 손실됩니다.</li>
	<li>원하는 프레임 수를 캡처합니다. 피험자와 보정 데이터 세트 모두에 대해 캡처된 모든 이미지를 저장할 수 있을 만큼 충분히 큰 하드 드라이브를 가져와야 합니다. 를 사용하면 . OBJ 파일 형식, 30 x 640 해상도에서 1분 동안 480Hz로 녹화된 480D 비디오는 50GB를 초과할 수 있습니다.</li>
</ol>
4. 데이터 분석 및 시각화
사내 GUI와 같이 속도에 최적화된 소프트웨어를 사용하면 데이터 캡처 중에 이 단계를 수행할 수 있습니다. 실시간 처리를 통해 사용자는 결과 데이터가 애플리케이션에 적합한지 즉시 감지하고 필요한 경우 조정할 수 있습니다. 그러나 후처리는 더 유연하고 정확도가 높을 수 있습니다. 사후 처리는 구현하기가 훨씬 간단하고 시작하기에 가장 좋은 위치입니다.
<ol>
	<li>보정 및 피험자 데이터 모두에 대해 래핑된 단계를 계산합니다. 18의 3단계 위상 이동 알고리즘에서 phase는 코사인 함수 내에서 점의 위치를 설명합니다. 3개의 방정식과 3개의 미지수가 있기 때문에 각 지점의 위상에 대해 1.1단계에서 fringe 이미지를 생성하는 데 사용된 방정식을 풀 수 있습니다. 아크탄젠트 함수로 인해 계산된 위상은 (-π, π] 범위 내에 있습니다. 따라서 이를 "래핑된 단계"라고 합니다. 처리 속도를 향상시키기 위해21에서 논의된 빠른 위상 래핑 알고리즘을 개발했습니다.</li>
	<li>위상 맵의 래핑을 해제합니다. 위상에서 2π 점프를 감지하고 2π의 배수를 더하거나 빼서 제거하는 위상 언래핑 알고리즘을 채택합니다. 이전 시스템의22에서 빠른 알고리즘을 사용하여 위상을 강력하면서도 빠르게 해제했습니다. 이 비디오에서는15에 설명된 다중 주파수 기술을 시연하며, 이 기법은 서로 다른 주파수에서 3개의 위상 편이 패턴의 추가 세트를 사용합니다. 각 3개 세트의 래핑된 위상 맵을 결합하여 래핑되지 않은 단일 위상 맵을 강력하게 생성할 수 있습니다. 이 기술은 바이너리 디포커스로 정확한 캡처를 위해 깊이 범위를 증가시킵니다.</li>
	<li>선택 사항: 2D 텍스처를 계산합니다. 인접한 세 개의 fringe 이미지 세트를 평균화하면 fringe stripes가 씻겨 나가고 2D 텍스처 맵이 생성됩니다. 원하는 경우 시각화 중에 3D 데이터에 매핑할 수 있습니다.</li>
	<li>래핑되지 않은 위상 맵을 깊이로 변환합니다. 도 23에서 설명한 바와 같이, 교정 큐브에 대한 깊이는 교정 큐브 위상 맵과 기준 평면 위상 맵 간의 차이로 계산될 수 있습니다. 이 계산된 깊이를 알려진 깊이와 비교하여 올바른 깊이 배율 계수 c0을 계산합니다. 그런 다음 피험자의 위상에서 참조 평면 위상을 빼고 결과에 c0을 곱하여 피험자의 깊이를 계산합니다.</li>
	<li>x 좌표와 y 좌표를 계산합니다. 스케일링 계수 c0을 캘리브레이션 큐브 깊이 맵에 적용합니다. 픽셀 단위의 큐브 치수에서 xy 평면의 알려진 큐브 치수까지의 변환 계수 ρ를 결정합니다. 주제 데이터의 픽셀 수에 ρ를 곱하여 x 및 y 좌표를 계산합니다.</li>
	<li>데이터를 시각화합니다. 개별 프레임은 사내 형식으로 저장하고 간단한 MATLAB 코드로 보거나 . OBJ 형식으로 만들고 Blender와 같은 상용 3D 모델링 프로그램으로 볼 수 있습니다. 각 프레임에 많은 양의 데이터가 있기 때문에 이러한 응용 프로그램은 일부 컴퓨터에서 느려질 수 있습니다. 응답성을 높이거나 라이브 비디오를 표시하려면 OpenGL 또는 Direct3D와 같은 컴퓨터 그래픽 라이브러리를 사용하여 소프트웨어를 작성하십시오. 이 소프트웨어는 GPU(그래픽 처리 장치)를 활용하여 래핑되지 않은 위상에서 x, y 및 z 좌표를 빠르게 생성하고, 삼각형 메시를 형성하고, 조명 법선을 계산하고, 결과를 표시할 수 있습니다. GPU를 사용하여 프레임당 약 300,000개의 포인트로 최대 30Hz의 라이브 3D 데이터 시각화를 달성했습니다.</li>
</ol>

<ol><li>Salvi, J., Fernandez, S., Pribanic, T., Llado, X. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((A+state+of+the+art+in+structured+light+patterns+for+surface+profilometry%5BTitle%5D)+AND+%22Patt.+Recogn%22%5BJournal%5D)">A state of the art in structured light patterns for surface profilometry.</a> Patt. Recogn. 43, 2666-2680 (2010).</li>
<li>Gorthi, S. S., Rastogi, P. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Fringe+projection+techniques%3A+Whither+we+are%5BTitle%5D)+AND+%22Opt.+Laser+Eng%22%5BJournal%5D)">Fringe projection techniques: Whither we are.</a> Opt. Laser Eng. 48 (2), 133-140 (2010).</li>
<li>Zhang, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Recent+progresses+on+real-time+3-D+shape+measurement+using+digital+fringe+projection+techniques%5BTitle%5D)+AND+%22Opt.+Laser+Eng%22%5BJournal%5D)">Recent progresses on real-time 3-D shape measurement using digital fringe projection techniques.</a> Opt. Laser Eng. 48 (2), 149-158 (2010).</li>
<li>Su, X., Zhang, Q. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Dynamic+3-D+shape+measurement+method%3A+A+review%5BTitle%5D)+AND+%22Opt.+Laser+Eng%22%5BJournal%5D)">Dynamic 3-D shape measurement method: A review.</a> Opt. Laser Eng. 48 (2), 191-204 (2010).</li>
<li>Geng, J. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Structured-light+3D+surface+imaging%3A+a+tutorial%5BTitle%5D)+AND+%22Adv.+Opt.+Photonics%22%5BJournal%5D)">Structured-light 3D surface imaging: a tutorial.</a> Adv. Opt. Photonics. 3 (2), 128-160 (2011).</li>
<li>Zhang, S., Yau, S. -T. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((High-resolution%2C+real-time+3-D+absolute+coordinate+measurement+based+on+a+phase-shifting+method%5BTitle%5D)+AND+%22Opt.+Express%22%5BJournal%5D)">High-resolution, real-time 3-D absolute coordinate measurement based on a phase-shifting method.</a> Opt. Express. 14 (7), 2644-2649 (2006).</li>
<li>Zhang, S., Royer, D., Yau, S. -T. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((GPU-assisted+high-resolution%2C+real-time+3-D+shape+measurement%5BTitle%5D)+AND+%22Opt.+Express%22%5BJournal%5D)">GPU-assisted high-resolution, real-time 3-D shape measurement.</a> Opt. Express. 14 (20), 9120-9129 (2006).</li>
<li>Lei, S., Zhang, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Flexible+3-D+shape+measurement+using+projector+defocusing%5BTitle%5D)+AND+%22Opt.+Lett%22%5BJournal%5D)">Flexible 3-D shape measurement using projector defocusing.</a> Opt. Lett. 34 (20), 3080-3082 (2009).</li>
<li>Mehta, R. P., Zhang, S., Hadlock, T. A. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Novel+3-D+video+for+quantification+of+facial+movement%5BTitle%5D)+AND+%22Otolaryngol.+Head+Neck+Surg%22%5BJournal%5D)">Novel 3-D video for quantification of facial movement.</a> Otolaryngol. Head Neck Surg. 138 (4), 468-472 (2008).</li>
<li>Wang, Y., et al. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((High+resolution+acquisition%2C+learning+and+transfer+of+dynamic+3D+facial+expressions%5BTitle%5D)+AND+%22Comput.+Graph.+Forum%22%5BJournal%5D)">High resolution acquisition, learning and transfer of dynamic 3D facial expressions.</a> Comput. Graph. Forum. 23 (3), (2004).</li>
<li>Laughner, J. I., Zhang, S., Li, H., Efimov, I. R. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Mapping+cardiac+surface+mechanics+with+structured+light+imaging%5BTitle%5D)+AND+%22Am.+J.+Physiol.+Heart+Circ.+Physiol%22%5BJournal%5D)">Mapping cardiac surface mechanics with structured light imaging.</a> Am. J. Physiol. Heart Circ. Physiol. , in press (2012).</li>
<li>Ekstrand, L., Wang, Y., Karpinsky, N., Zhang, S. Superfast 3D profilometry with digital fringe projection and phase-shifting techniques. <a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=author%3aEkstrand%2C+L+%22Handbook+of+3-D+machine+vision%3A+Optical+metrology+and+imaging%22">Handbook of 3-D machine vision: Optical metrology and imaging</a>. , Taylor & Francis. Boca Raton, FL. (2012).</li>
<li>Zhang, S., Huang, P. S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((High-resolution+real-time+three-dimensional+shape+measurement%5BTitle%5D)+AND+%22Opt.+Eng%22%5BJournal%5D)">High-resolution real-time three-dimensional shape measurement.</a> Opt. Eng. 45 (12), 123-601 (2006).</li>
<li>Li, Y., Zhao, C., Qian, Y., Wang, H., Jin, H. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((High-speed+and+dense+three-dimensional+surface+acquisition+using+defocused+binary+patterns+for+spatially+isolated+objects%5BTitle%5D)+AND+%22Opt.+Express%22%5BJournal%5D)">High-speed and dense three-dimensional surface acquisition using defocused binary patterns for spatially isolated objects.</a> Opt. Express. 18, 21-635 (2010).</li>
<li>Wang, Y., Zhang, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Superfast+multifrequency+phase-shifting+technique+with+optimal+pulse+width+modulation%5BTitle%5D)+AND+%22Opt.+Express%22%5BJournal%5D)">Superfast multifrequency phase-shifting technique with optimal pulse width modulation.</a> Opt. Express. 19 (6), 5143-5148 (2011).</li>
<li>Zhang, S., Huang, P. S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Novel+method+for+structured+light+system+calibration%5BTitle%5D)+AND+%22Opt.+Eng%22%5BJournal%5D)">Novel method for structured light system calibration.</a> Opt. Eng. 45 (8), 083601(2006).</li>
<li>Merner, L., Wang, Y., Zhang, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Accurate+calibration+for+3D+shape+measurement+system+using+a+binary+defocusing+technique%5BTitle%5D)+AND+%22Opt.+Laser+Eng%22%5BJournal%5D)">Accurate calibration for 3D shape measurement system using a binary defocusing technique.</a> Opt. Laser Eng. 51 (5), 514-519 (2013).</li>
<li><a target="_blank" href="http://scholar.google.com/scholar?hl=en&safe=off&q=%22Optical+Shop+Testing%22">Optical Shop Testing</a>. Malacara, D. , 3rd, John Wiley and Sons. New York. (2007).</li>
<li>Wang, Y., Zhang, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Three-dimensional+shape+measurement+with+binary+dithered+patterns%5BTitle%5D)+AND+%22Appl.+Opt%22%5BJournal%5D)">Three-dimensional shape measurement with binary dithered patterns.</a> Appl. Opt. 51 (27), 6631-6636 (2012).</li>
<li>Ekstrand, L., Zhang, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Autoexposure+for+three-dimensional+shape+measurement+with+a+digital-light-processing+projector%5BTitle%5D)+AND+%22Opt.+Eng%22%5BJournal%5D)">Autoexposure for three-dimensional shape measurement with a digital-light-processing projector.</a> Opt. Eng. 50 (12), 123-603 (2011).</li>
<li>Huang, P. S., Zhang, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Fast+three-step+phase-shifting+algorithm%5BTitle%5D)+AND+%22Appl.+Opt%22%5BJournal%5D)">Fast three-step phase-shifting algorithm.</a> Appl. Opt. 45 (21), 5086-5091 (2006).</li>
<li>Zhang, S., Li, X., Yau, S. -T. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Multilevel+quality-guided+phase+unwrapping+algorithm+for+real-time+3-D+shape+reconstruction%5BTitle%5D)+AND+%22Appl.+Opt%22%5BJournal%5D)">Multilevel quality-guided phase unwrapping algorithm for real-time 3-D shape reconstruction.</a> Appl. Opt. 46 (1), 50-57 (2007).</li>
<li>Xu, Y., Ekstrand, L., Dai, J., Zhang, S. <a target="_blank" href="http://www.ncbi.nlm.nih.gov/pubmed?term=((Phase+error+compensation+for+3-D+shape+measurement+with+projector+defocusing%5BTitle%5D)+AND+%22Appl.+Opt%22%5BJournal%5D)">Phase error compensation for 3-D shape measurement with projector defocusing.</a> Appl. Opt. 50 (18), 2572-2581 (2011).</li>
</ol>

저자는 경쟁하는 재정적 이해관계가 없습니다.

이 고해상도, 실시간, 초고속 3D 비디오 이미징 기술은 생물학에서 공학 실무에 이르기까지 수많은 다양한 과학 분야에 잠재적으로 도움이 될 수 있는 플랫폼 기술입니다. 생의학 응용 분야에는 얼굴 움직임과 장기 표면의 정밀 측정이 포함됩니다. 다른 응용 분야로는 뒤틀린 표면 특징을 감지하는 3D 자동 품질 관리가 있습니다. 3D 강화 화상 회의; 영화 및 비디오 게임을 위한 얼굴 특징의 상세한 디지털화; 구조의 설계 및 분석을 위한 조밀하고 빠른 변형 측정; 및 유체 표면 특성화. 많은 생물학 및 공학 응용 분야(예: 토끼 심장의 박동, 유체 충격파)는 앨리어싱 아티팩트 없이 특징을 올바르게 해결하기 위해 바이너리 디포커스 시스템의 초고속 이미징 속도를 필요로 합니다.
그럼에도 불구하고 이 기술을 널리 채택하는 데는 많은 과제가 남아 있습니다. 기존의 DFP 기술에서는 프로젝터가 8비트 그레이스케일 정현파 프린지 패턴을 표시해야 합니다. 이 기술의 속도는 프로젝터의 재생 빈도(일반적으로 120Hz)에 의해 제한됩니다. 이 속도는 얼굴 표정과 같은 슬로우 모션 캡처에 충분합니다. 그러나 더 빠른 캡처 속도가 필요한 수많은 애플리케이션이 존재합니다.
바이너리 디포커싱 기술은 이러한 속도 제한을 완화하여 초고속 3D 비디오 이미징 시스템을 성공적으로 만들었습니다. 그러나 이 시스템에는 두 가지 단점이 있습니다. 첫째, DLP Discovery 플랫폼과 같은 고가의 프로젝터와 Vision Research Phantom v9.1과 같은 고가의 고속 비디오 카메라가 필요합니다. 둘째, 제곱 이진 패턴의 디포커스를 통해 정현파 패턴을 생성하기 때문에, 이진 디포커싱 기술은 기존 DFP 기술과 동일한 품질의 정현파 프린지를 생성하는 데 어려움이 있으며 깊이 측정 범위가 줄어듭니다(자세한 설명은23 참조). 최근 조사에 따르면 디더링된 이진 정현파 패턴은 깊이 측정 범위의 한계를 크게 완화할 수 있습니다19. 향후 연구는 이진 디포커싱의 장점을 유지하면서 나머지 문제를 극복하는 데 초점을 맞출 것입니다.
또 다른 과제는 고속, 고해상도 3D 비디오 이미징 시스템에서 생성된 대량의 데이터를 압축하고 저장하는 것입니다. 압축되지 않은 3D 비디오는 압축되지 않은 2D 비디오보다 훨씬 큽니다. 예를 들어, 640 x 480의 해상도에서 1분 동안 30Hz로 녹화된 3D 비디오의 경우 . OBJ 파일 크기가 50GB를 초과할 수 있어 저장이 매우 어렵습니다. 3D 비디오 압축 분야에서는 거의 진전이 없었기 때문에 앞으로도 이에 집중할 것입니다.

디지털 프린지 프로젝션(DFP) 기술은 스테레오 비전을 얻기 위해 인간의 눈과 뇌가 사용하는 것과 동일한 원리인 동일한 장면을 다른 각도에서 보는 두 가지 보기 간의 상관 관계와 삼각 측량을 기반으로 합니다. 그러나, 스테레오 기반 방식과 달리, DFP는 디지털 비디오 프로젝터를 사용하여 카메라1 중 하나를 대체한다. 프로젝터는 알려진 사인파 패턴을 물체에 빠르게 투사하여 물체의 표면이 카메라의 시야에서 왜곡시킵니다. 서로 다른 위상 변이에서 세 개의 왜곡된 패턴(fringe 이미지)을 분석하여 삼각 측량을 통해 깊이를 검색할 수 있습니다. 알려진 패턴을 사용하면 대응 지점을 식별하는 어려운 계산 문제가 제거되어 카메라 해상도에서 깊이 측정을 캡처할 수 있습니다. 예를 들어 576 x 576 카메라를 사용하면 이 기술을 사용하여 331,776개의 포인트를 캡처할 수 있습니다. 이를 통해 DFP 시스템은 인간의 감정에서 안면 근육의 움직임과 같은 매우 미세한 세부 사항을 측정할 수 있습니다.
정적 또는 준정적 이벤트에 대한 3D 광학 이미징 기술은 지난 수십 년 동안 광범위하게 연구되어 왔으며 비디오 게임 디자인, 애니메이션, 영화, 뮤직 비디오, 가상 현실, 원격 수술 및 많은 엔지니어링 분야에서 큰 성공을 거두었습니다5. 수많은 3D 형상 측정 기술이 존재하지만 표면 접촉 방법과 표면 비접촉 방법의 두 가지 범주로 분류할 수 있습니다. 좌표 측정 기계(CMM)와 원자력 현미경(AFM)은 모두 높은 정확도로 3D 프로파일을 얻기 위해 측정 표면과의 접촉이 필요합니다. 이 요구 사항은 접촉 방법의 속도를 심각하게 제한합니다. 스캔당 수천 개의 포인트로 kHz 측정 속도에 도달할 수 없습니다.
표면 비접촉 기술은 일반적으로 광학 삼각 측량 방법(예: 스테레오 비전, 시공간 스테레오, 구조화된 광)을 사용합니다. 알려진 패턴을 물체에 적극적으로 투영함으로써 구조화 광 기술을 사용하여 강한 국소 질감 변화 없이 표면을 측정할 수 있습니다1. 프린지 분석은 정현파 구조 패턴(프린지 패턴이라고도 함)을 사용하는 구조화 조명 기술의 특별한 그룹입니다. 이러한 패턴은 알려진 방식으로 점마다 연속적으로 변하는 강도를 갖기 때문에 구조광 기술을 프로젝터 픽셀 해상도에서 카메라 픽셀 해상도12로 향상시킵니다. 최근에는 fringe 분석 기술이 고해상도 3D 이미징을 달성하는 데 중요한 역할을 했습니다.
DFP(Digital Fringe Projection) 기술은 디지털 비디오 프로젝터를 사용하여 사인파 프린지 패턴을 생성합니다. 이 기술은 저렴한 비용, 더 빠른 속도 및 개발의 단순성이라는 장점이 있으며 지난 10년 동안 매우 활발한 연구 분야였습니다. DFP 및 이와 유사한 디지털 구조광 기술의 최근 발전은1-5에 요약되어 있습니다. 고속 응용 분야를 달성하려면 기본적인 작동 메커니즘으로 인해 DLP(Digital Light Processing) 프로젝터가 선호됩니다. 이 기술의 속도와 유연성 덕분에 40Hz에서 3D 비디오를 얻을 수 있었고 13 나중에 60Hz에서 6,7을 얻을 수 있었습니다.
그럼에도 불구하고 기존 DFP 기술에는 기본적인 속도 제한이 있습니다. DLP 프로젝터는 최대 재생률(일반적으로 120Hz)에서 8비트 컬러 이미지만 스왑할 수 있습니다. 전통적인 fringe 패턴은 8비트 회색조 이미지이기 때문에 그 중 3개를 빨간색, 녹색 및 파란색 채널로 하나의 컬러 이미지로 인코딩할 수 있습니다. 프로젝터는 각 채널(및 각 fringe 패턴)을 재생률의 3배(일반적으로 360Hz)로 교체합니다. 그러나 각 3D 비디오 프레임에는 세 가지 프린지 패턴이 필요하기 때문에 3D 비디오 캡처의 최대 속도는 여전히 재생률(120Hz)3,14에 불과합니다. 이 하드웨어 제한을 극복하기 위해 Google은 바이너리 디포커스8을 사용하는 수정된 DFP 기술을 발명했습니다. 8비트 회색조 fringe 패턴 대신 이 기술은 컴퓨터에서 생성된 1비트 이진 구조 패턴을 사용합니다. 이러한 패턴은 프로젝터 렌즈를 사용하여 초점이 흐려져 DFP에 대한 유사 사인파 패턴이 됩니다. DLP 프로젝터는 8비트 그레이스케일 이미지보다 더 빠르게 이진 이미지를 표시할 수 있기 때문에 이진 디포커스 기술은 기존 DFP 기술과 동일한 해상도로 수십 킬로헤르츠 3D 비디오 이미징 속도를 허용합니다15.
다음 프로토콜의 전반적인 목표는 바이너리 디포커스 3단계 위상 편이 DFP 시스템의 기본 구현 및 작동을 시연하는 것입니다. 첫째, 프로토콜은 필요한 구성 요소의 선택 및 통합을 다룹니다. 그런 다음 시스템에 대한 가장 간단하고 쉽게 액세스할 수 있는 교정 방법에 대해 설명합니다. 특정 응용 분야에 대한 문헌에서 보다 복잡한 교정 방법을 사용할 수 있습니다16,17. 그런 다음 프로토콜은 시스템을 사용한 3D 비디오 캡처 절차와 fringe 이미지를 시각화된 3D 측정으로 변환하는 프로세스에 중점을 둡니다. 마지막으로, 실시간 및 고속 시스템의 대표적인 결과를 제시하겠습니다.

디지털 프린지 프로젝션 기술을 사용한 고해상도, 고속, 3차원 비디오 이미징

High-resolution, High-speed, Three-dimensional Video Imaging with Digital Fringe Projection Techniques

디지털 프린지 프로젝션(DFP) 기법은 동적으로 변화하는 표면의 조밀한 3D 측정을 제공합니다. 사람의 눈과 뇌와 마찬가지로 DFP는 동일한 장면의 두 보기에서 서로 다른 각도에서 일치하는 점 간의 삼각 측량을 사용하여 깊이를 계산합니다. 그러나 스테레오 기반 방법과 달리 DFP는 디지털 비디오 프로젝터를 사용하여 카메라1 중 하나를 대체합니다.. 프로젝터는 알려진 사인파 패턴을 피사체에 빠르게 투사하고 피사체의 표면은 카메라의 시야에서 이러한 패턴을 왜곡합니다. 카메라의 세 가지 왜곡된 패턴(fringe 이미지)을 사용하여 삼각 측량을 사용하여 깊이를 계산할 수 있습니다.
다른 3D 측정 방법과 달리 DFP 기술은 더 빠르고, 장비 비용이 저렴하고, 더 유연하고, 개발하기 쉬운 시스템을 만듭니다. DFP 시스템은 카메라와 동일한 측정 해상도를 달성할 수도 있습니다. 이러한 이유로 DFP 및 기타 디지털 구조광 기술은 최근 집중적인 연구의 초점이 되고 있습니다(1-5에 요약되어 있음).). DFP, 그래픽 처리 장치 및 최적화된 알고리즘을 활용하여 프레임당 300,000개 이상의 측정 지점에 대해 30Hz 3D 비디오 데이터 수집, 재구성 및 표시가 가능한 시스템을 개발했습니다6,7. 이진 디포커스 DFP 방법은 훨씬 더 빠른 속도를 달성할 수 있습니다8.
다양한 애플리케이션에서 DFP 기술의 이점을 활용할 수 있습니다. 우리의 협력자들은 안면 기능 분석9, 안면 애니메이션10, 심장 역학 연구11 및 유체 표면 측정에 당사의 시스템을 사용했지만 다른 많은 잠재적 응용 분야가 존재합니다.이 비디오는 DFP 기술의 기초를 가르치고 이진 디포커스 DFP 시스템의 설계 및 작동을 설명합니다.

그림 1은 시스템의 모식도를 보여줍니다. 이 비디오의 고속 이진 디포커싱 시스템은 Logic PD DLP LightCommander 프로젝터와 Phantom v9.1 CMOS 카메라로 구성되어 있습니다.
그림 2는 사람 얼굴을 촬영한 3D 실시간 시스템의 단일 프레임을 보여줍니다. 이 시스템은 640 x 480 카메라를 사용합니다. 앞서 언급한 기지의 사인파 패턴 덕분에 640 x 480 = 307,200개의 측정값을 캡처할 수 있으며, 이는 매우 미세한 세부 사항까지 기록하기에 충분한 해상도입니다.
그림 3은 60 Hz에서 인간의 얼굴 표정을 3D로 측정한 사례를 보여줍니다. 여기에서 비디오 시퀀스에서 선택한 4개의 프레임은 미세하게 상세한 기하학적 구조의 역동적인 변화를 캡처하는 실시간 시스템의 성능을 명확하게 입증합니다.
그림 4는 실시간 이진 디포커싱 3D 비디오 시스템과 함께 사용되는 실시간 시각화 소프트웨어를 보여줍니다. 피사체를 3D로 촬영한 비디오가 오른쪽에 있는 컴퓨터 모니터에 실시간으로 표시됩니다. 이 소프트웨어는 OpenGL 라이브러리, GLSL 및 QT를 사용하여 C++로 작성되었습니다. 사용된 컴퓨터는 Lenovo 노트북입니다.
그림 5는 새로 개발한 초고속 이진 디포커싱 시스템을 이용한 살아있는 토끼 심장 측정의 3D 프레임을 보여줍니다. 이 시스템은 576 x 576의 이미지 해상도로 667 Hz의 속도로 3D 프레임을 기록할 수 있습니다. 움직임으로 인한 아티팩트 없이 심장 표면을 측정하기 위해서는 초고속 속도가 필요합니다. 심장 측정 연구는 Washington University-St. Louis의 Igor Efimov 교수와 공동으로 진행되었습니다(자세한 내용은 11 참조). 토끼는 인도적인 방법으로 안락사되었으며, 이미지는 심장이 여전히 뛰고 있는 동안 촬영되었음에 유의하십시오.
<img alt="투사 방정식이 포함된 구조광 이미징 다이어그램; 프로젝터-카메라 설정이 패턴을 분석함." fo:content-width="5in" fo:src="/files/ftp_upload/50421/50421fig1highres.jpg" src="/files/ftp_upload/50421/50421fig1.jpg" data-altupdatedat="1787630408000" data-alt="그림 1"> 
그림 1. 3D 비디오 이미징 시스템의 배치. 이 시스템에서는 고속 DLP 프로젝터가 세 개의 이진 디더링 위상 이동 이미지를 피사체에 빠르게 연속적으로 투사합니다. 고속 CMOS 카메라를 사용하여 세 개의 프린지 이미지를 하나씩 캡처함으로써 깊이를 계산합니다.
<img alt="3D 얼굴 재구성 과정; 메쉬 시각화; 디지털 모델링 기술; 인체측정학 연구." fo:content-width="5in" fo:src="/files/ftp_upload/50421/50421fig2highres.jpg" src="/files/ftp_upload/50421/50421fig2.jpg" data-altupdatedat="1787630408000" data-alt="그림 2"> 
그림 2. 640 x 480 해상도로 측정하여 미세한 세부 사항이 드러난 사람 얼굴의 3D 측정값. 왼쪽부터 오른쪽으로 기하학적 구조와 완벽하게 정렬되어 동시에 캡처된 텍스처, 기하학적 구조의 셰이딩 뷰, 포인트 밀도를 나타내는 와이어프레임 뷰, 코 영역의 확대 뷰, 그리고 눈 영역의 확대 뷰를 보여준다.
<img alt="3D 얼굴 표정 모핑, 디지털 변환, 시각적 분석, 시퀀스 다이어그램." fo:content-width="5in" fo:src="/files/ftp_upload/50421/50421fig3highres.jpg" src="/files/ftp_upload/50421/50421fig3.jpg" data-altupdatedat="1787630408000" data-alt="그림 3"> 
그림 3. 얼굴 표정 형성 과정의 3D 비디오에서 선택된 4개의 프레임. 비디오는 60 Hz의 주사율과 640 x 480의 해상도로 캡처되었습니다. 이 프레임들은 여성이 무표정에서 미소로 바뀔 때 얼굴에서 나타나는 기하학적 변화를 강조하여 보여줍니다.
<img alt="실시간 결과가 표시되는 광학 스캐닝 및 3D 이미징 실험의 얼굴 인식 설정." fo:content-width="5in" fo:src="/files/ftp_upload/50421/50421fig4highres.jpg" src="/files/ftp_upload/50421/50421fig4.jpg" data-altupdatedat="1787630408000" data-alt="그림 4"> 
그림 4. 실시간 3D 비디오 캡처, 처리 및 렌더링. 3D 측정값이 피험자의 오른쪽에 있는 컴퓨터 화면에 실시간으로 표시됩니다.
<img alt="3D 심장 모델; 의료 영상 분석을 위한 다양한 회전 뷰를 보여주는 도식." fo:content-width="5in" fo:src="/files/ftp_upload/50421/50421fig5highres.jpg" src="/files/ftp_upload/50421/50421fig5.jpg" data-altupdatedat="1787630408000" data-alt="그림 5"> 
그림 5. 초고속 3D 비디오 영상 시스템을 이용한 살아있는 토끼 심장 촬영.심장은 약 200 beats/min으로 뛰고 있습니다. 3D 캡처 속도는 166 Hz였으며 이미지 해상도는 576 x 576입니다. 자세한 내용은 11을 참조하십시오.

이 비디오는 동적으로 변화하는 표면의 조밀한 3D 측정을 제공하는 디지털 프린지 프로젝션 기술의 기초를 설명합니다. 또한 이러한 기술을 기반으로 하는 고속 이진 디포커스 시스템의 설계 및 작동을 보여줍니다.

Digital fringe projection (DFP) techniques provide dense 3D measurements of dynamically changing surfaces.&#160;Like the human eyes and brain, DFP uses ...

이 절차의 전반적인 목표는 실시간 이상의 속도로 고해상도 3D 비디오를 캡처하는 것입니다. 이는 먼저 디지털 라이트 프로세싱 프로젝터를 사용하여 피사체에 정현파 프린지 패턴 이미지를 고속으로 투사함으로써 달성됩니다. 높은 정확도를 얻기 위해 위상 이동된 세 가지 코사인 패턴을 순차적으로 투사합니다.다른 시야각에서 이러한 이미지들을 캡처하기 위해 카메라가 사용됩니다. 두 번째 단계는 세 장의 프린지 패턴 이미지 세트 각각에서 랩핑된 위상(wrapped phase)을 계산하는 것입니다. 이는 아크탄젠트 함수와 이미지 강도 값을 사용하여 수행됩니다.다음으로, 아크탄젠트 함수로 인해 발생하는 2π 불연속성을 제거하기 위해 위상을 언랩(unwrap)합니다. 마지막 단계는 피사체의 언랩된 위상에서 깊이 정보를 추출하는 것입니다. 이는 피사체의 언랩된 위상 맵과 보정 평면의 언랩된 위상 맵 사이의 차이이며, 기준 객체를 사용하여 찾은 상수를 통해 적절히 스케일링 및 이동 처리됩니다.최종적으로, 생성된 데이터 프레임은 그래픽 소프트웨어를 사용하여 표시할 수 있습니다. 레이저 스캐닝과 같은 기존의 다른 방법과 비교했을 때 이 기술의 주요 장점은 고해상도와 고속 구현이 모두 가능하다는 점입니다. 알려진 정현파 패턴이 대상에 투사되기 때문에, 576 by 576 카메라를 사용한 경우 각 픽셀에 대해 3D 데이터 포인트를 얻을 수 있습니다.프레임당 300,000개 이상의 3D 데이터 포인트를 추출할 수 있습니다. 이 방법은 얼굴 표정의 형성과 심장 표면의 박동을 포착하는 것과 같은 의료 분야에 응용될 가능성이 있을 뿐만 아니라, 다른 수많은 연구 분야에도 적용될 수 있습니다. 또한 영화 및 비디오 게임에 사용되는 고해상도 얼굴 모션 캡처나 향상된 화상 회의 방식을 구현할 수 있게 해줍니다.또한 제조 환경에서 결함을 감지하는 데 사용할 수 있습니다. 이 방법의 시각적 시연은 교정 단계로서 매우 중요합니다. 시스템의 시각적 노후화와 측정 방식으로 인해 처리 단계를 학습하는 것이 어렵습니다.문제를 감지하는 가장 간단하고 쉬운 방법은 훈련된 육안 검사를 이용하는 것입니다. 첫 번째 단계는 투사될 간섭무늬 패턴을 생성하는 것입니다. 이러한 패턴은 여기에서는 matlab과 같은 이미지 프로그래밍 환경을 사용하여 사전에 준비합니다.이 영상에서는 바이너리 패턴의 사용에 초점을 맞춥니다. 디포커스된 바이너리 패턴을 제작하려면, 디더링(dithering) 기법을 사용하여 순수 흑색과 순백색 픽셀만으로 사인파 패턴을 생성하십시오. 3단계 위상 이동 알고리즘의 요구 사항에 따라, 위상이 서로 2π/3씩 이동된 세 개의 패턴 이미지를 만듭니다.본 시연에서는 더 급격한 깊이 변화를 포착할 수 있는 다중 주파수 기법을 위해 3개씩 구성된 두 세트를 추가로 생성합니다. 다음으로, 단색 설정이 가능한 고속 DLP(digital light processing) 프로젝터를 선택하십시오. 프로젝터와 함께 제공된 소프트웨어를 사용하여 위상 이동을 위한 이미지를 업로드하십시오.이제 시스템에 적합한 캡처 속도를 가진 흑백 C, CD 또는 COS 카메라를 선택하십시오. 카메라는 프로젝터를 물체로부터 어느 정도 거리로 배치해야 할지 결정하기 위해 각 비디오 프레임당 모든 프린지 이미지 세트를 캡처해야 한다는 점을 유념하십시오. 이미지의 수직 및 수평 범위가 연구 대상 물체보다 약간 더 크도록 조절하여 대형 평면 상대적으로 프로젝터를 이동시키십시오.프로젝터에서 벽까지의 거리를 측정합니다. 이 거리에서의 희망 시야각과 카메라 센서 크기를 이용하여 렌즈의 초점 거리를 구합니다. 마지막 구성 단계는 프로젝터와 카메라 사이의 각도가 클 때 두 구성 요소 간의 각도 분리도를 결정하는 것입니다.특징점 간의 삼각측량은 명확하지만, 더 많은 특징점이 그림자에 가려져 소실됩니다. 각도가 작으면 삼각측량이 어려워져 결과에 노이즈가 증가합니다. 일반적으로 10~15도가 적절한 절충안입니다.데이터 캡처 직전에 보정을 수행하는 것이 가장 좋습니다. 바이너리 디포커싱 시스템의 경우, 이미징 평면의 패턴이 고품질의 사인파와 유사해질 때까지 투사 렌즈의 초점을 맞추지 마십시오(defocus). 이 과정에서 테스트 데이터를 검토하고 렌즈를 조정하는 반복적인 작업이 필요할 수 있습니다.무늬의 간섭 무늬가 서로 뭉개져 보인다면 프로젝터의 초점이 너무 많이 흐려진 것입니다. 무늬 내에 점들이 보인다면 프로젝터의 초점이 너무 과하게 맞은 것입니다. 이제 카메라와 프로젝터 모두의 시야에 평평한 화이트보드를 배치하십시오.첫 번째 프린지 이미지를 보드에 투사합니다. 그다음 카메라로 이를 캡처하고 나머지 프린지 이미지들을 투사하여 기록합니다. 동일한 방식으로, 이 프린지 이미지들을 보정 평면으로 라벨링하여 데이터 처리 단계를 위해 저장합니다.다음으로 크기를 알고 있는 물체를 시스템의 시야 내에 배치합니다. 여기서는 확산 접착성 폼 사각형으로 덮인 강성 폼 큐브를 사용합니다. 동일한 일련의 프린지 이미지를 큐브 위에 투영합니다.카메라로 각각을 캡처합니다. 캡처한 이미지를 보정 큐브(calibration cube)로 라벨링하여 처리 단계를 위해 저장합니다. 데이터를 수집하기 위해서입니다.피사체를 카메라의 초점 평면에 위치시키고 피사체에 프린지 이미지를 투사하여 이를 캡처합니다. 고속으로 움직이는 대상을 정확하게 캡처하기 위해서는 일반적으로 고속 촬영이 필요합니다. 사람의 눈에는 프린지만이 보입니다.시간적 간섭계(temporal interference)에서, 캡처한 이미지를 사용하여 카메라 조리개 조정을 보조하십시오. 광량을 최적화하기 위해, 간섭무늬 이미지는 포화되지 않는 범위 내에서 가능한 한 밝게 설정해야 합니다.다음 단계는 데이터의 후처리 과정입니다. 3단계 위상 이동 알고리즘에서 위상은 사인 곡선 패턴 내의 점의 위치를 결정하는 코사인 함수의 인자입니다. 간섭무늬 이미지로부터 각 점의 위상을 결정하는 알고리즘이 구현되었으며, 이렇게 계산된 래핑된 위상(wrapped phase)은 해당 구간 내에 존재합니다.음의 PI를 PI로 변환하는 이 알고리즘을 보정 평면과 큐브 및 피험자 데이터에 적용합니다. 그런 다음 다른 알고리즘을 사용하여 위상 도약 지점에 2π를 더하거나 빼서 위상 맵을 언래핑(unwrap)합니다. 다중 주파수 기법에서는 각 주파수의 래핑된 위상 맵을 결합하여 하나의 언래핑된 위상 맵을 생성하며, 이 시점에서 보정 단계를 다시 확인하는 것이 중요합니다. 보정 평면 위상 맵의 중심에서 수평 단면을 취합니다.벌크 프로파일(bulk profile)을 제거하여 위상 오차 추정치를 얻습니다. 투사된 패턴의 초점이 너무 많이 맞았다면 오차가 크게 나타납니다. 오차가 범위 내에 들어올 때까지 필요에 따라 프로젝터 렌즈를 조정하십시오.-0.1에서 0.1 라디안입니다. 다음으로, 세 번째 알고리즘이 보정 큐브의 깊이를 계산합니다. 이는 보정 큐브와 기준 평면 위상 맵의 차이입니다.이를 통해 스케일 인자를 결정합니다. 피사체의 위상 맵에서 기준면의 위상 맵을 뺀 후 스케일 인자를 적용하여 피사체의 깊이를 구합니다. 이제 해당 데이터를 저장하여 MATLAB 또는 기타 3D 그래픽 소프트웨어에서 시각화할 수 있습니다.이 기술을 통해 인간의 얼굴을 미세한 세부 사항까지 드러낼 수 있을 만큼 높은 해상도로 실시간 고속 3차원 이미징을 수행할 수 있습니다. 왼쪽의 세 가지 이미지 세트는 2D, 텍스처, 오버레이, 셰이딩 및 라이팅, 그리고 와이어프레임 모드로 표시된 전체 얼굴의 모습입니다. 중앙에는 코 영역을 확대한 와이어프레임 뷰가 나타나 있습니다.오른쪽의 점 밀도는 눈 주변 영역을 확대한 모습입니다. 이 이미지들은 사인파 무늬 패턴을 사용하여 생성되었습니다. 여기에서는 미소가 형성되는 과정의 3D 비디오를 보여줍니다.비디오는 60 Hz의 주사율과 640 by 480의 해상도로 캡처되었으며, 사인파 무늬 패턴이 사용되었습니다. 실시간 3D 비디오의 캡처, 처리 및 렌더링이 가능합니다. 본 비디오에서 3D 측정값은 컴퓨터 화면에 30 Hz로 표시됩니다.이 방법의 성능을 보여주는 마지막 사례로, 살아있는 토끼 심장의 3D 비디오 영상 촬영을 보여줍니다. 이진 디포커싱(binary defocusing)을 사용하여 측정한 심박수는 분당 약 200회였습니다. 3D 캡처 속도는 166 hertz였으며 해상도는 576 by 576이었습니다.모션 아티팩트를 방지하기 위해 고속 촬영이 필요했습니다. 보정법을 숙달하면 적절히 수행했을 때 데이터 캡처와 데이터 처리를 몇 시간 내에 완료할 수 있습니다. 속도에 최적화된 처리 소프트웨어를 사용하면, 개발 이후 수많은 프로세서 결과를 컴퓨터 화면에 실시간으로 표시할 수 있습니다.이 기술은 심장 표면 역학 분야의 연구자들이 고해상도 3D 비디오 데이터를 사용하여 박동하는 토끼 심장의 동적인 표면 기하학적 구조를 조사할 수 있는 길을 열어주었습니다. 이 영상을 시청한 후, 여러분은 고해상도 및 고속 3D 비디오 시스템을 설계하고 운영하는 방법에 대한 기본적인 이해를 갖추게 될 것입니다. 특히, 집중 이진 패턴을 이용한 디지털 프린지 투영의 개념과 기준면 보정 방법에 익숙해져야 합니다.또한 양호한 언랩핑 위상 맵(unwrapped phase map)과 그렇지 않은 맵의 차이를 구분할 수 있어야 합니다.

high-resolution-high-speed-three-dimensional-video-imaging-with

Research

연구

JoVE Journal

Engineering

공학

디지털 프린지 프로젝션 기법을 사용한 고해상도, 고속, 3차원 비디오 이미징

비 - 파괴적인 볼륨 시각화는 가장 효율이 X - 선 마이크로 컴퓨터 tomography (CT) 어떤의 단층 기술에 의해 형성될 수 있습니다.

고해상도 3D 영상의 전 VIVO</em마이크로 중부 표준시로> 생물 학적 샘플

사용자 정의, 실시간 공촛점 스캐닝 이미징 시스템의 전체 구조는 설명합니다. 쉽게 동영상 속도 현미경 및 microendoscopy 사용할 수있는이 시스템은, 비용의 일부로 표준 상용 공촛점 시스템을 사용하여 액세스할 수 없습니다 이미징 형상 및 응용 프로그램의 배열을 허용합니다.

비디오 - 속도 검색 공촛점 현미경과 Microendoscopy

Lensfree 광학 tomography은 &lt;1 μm의의 공간적 해상도를 제공하는 입체 현미경 기법이다 × &lt;1 μm의 × 15~1백밀리미터의 큰 이미지 볼륨여 각각 X, Y 및 Z 크기에서 &lt;3...

멀티 앵글 조명 및 픽셀 슈퍼 해상도를 채용 Lensfree 온칩 단층 현미경

약하게 산란 물체의 3 차원 위치를 고유 표준 현미경에 사소한 변형을 수반 인라인 디지털 홀로그램 현미경 (DIHM)를 사용하여 식별 될 수있다. 우리의 소프트웨어는 삼차원 위치 및 미세한 위상 객체의 형상을 수득 레일리-펠드 역 전파 결합 촬상 간단한 휴리스틱을 사용한다.

약하게 산란 주제의 디지털 인라인 홀로그램 현미경 (DIHM)

광 회절 한계를 극복하기위한 방법이 제시된다. 광학 반복 Gerchberg - 스턴 알고리즘을 이용하여 위상 검색 및 첫 번째 단계의 반복 하였다 이미징 시스템 변속 : 상기 방법은 두 단계를 포함한다. 합성 증가 렌즈 구경보다 높은 이미징 해상도를 수득 이동 방향을 따라 발생한다.

이동 플랫폼에서 이미징 시간 다중화 슈퍼 해결 기법

살아있는 세포 내부의 동적 단백질에 대한 시공간 정보는 생물학을 이해하는 데 매우 중요합니다. f3D-SIM(fast 3D-structured illumination microscopy)이라고 하는 초고해상도 현미경 검사의 한 유형은 박테리아의 사이토키네틱 Z 고리에 대한 고유한 정보, 즉 구슬 모양의 모양과 고리 내 FtsZ의 빠른 역학을 모두 보여줍니다.

고속 3D 구조 조명 현미경을 사용하여 라이브 박테리아의 Cytokinetic Z 반지의 슈퍼 해상도 이미징 (F3D-SIM)

사차원 (4D) 영상은 척추 신경 터미널을 살고있는 엔도 좀의 두 가지 유형 사이의 행동과 상호 작용을 연구하기 위해 사용된다. 이 작은 구조의 이동은 같은 엔도 좀의 융합과 세포 외 유출 등의 이벤트의 확인을 허용, 세 가지 차원을 특징으로한다.

네 차원 형광 이미징과 신경 말단 생활에 엔도 좀 역학의 시각화

에서는 실시간으로 3차원 기능 및 분자 이미징을 위해 새로 개발된 휴대용 광음향(광음향) 시스템을 사용한 이미징을 위한 실험 프로토콜에 대한 자세한 설명을 제공합니다. 입증된 강력한 성능과 다양성은 전임상 연구 및 임상 실습에서 광음향 기술의 새로운 응용 분야를 정의할 수 있습니다.

범용 실시간으로 깊은 조직 인간의 혈관 조영술과 기능 전임상 연구를위한 3 차원 광 음향 이미징 프로브를 손 개최

우리는 MEMS 장치의 검사 및 특성화를위한 소형 반사 디지털 홀로 그래픽 시스템 (CDHM)을 제시한다. 자연의 기하학적 배율을​​ 제공 발산 입력 파를 사용하는 렌즈없는 디자인이 설명된다. 모두 정적 및 동적 연구가되게됩니다.

MEMS 검사 및 특성화를위한 소형 렌즈가없는 디지털 홀로그램 현미경

우리는 쥐 배아의 3차원(3D) 이미지를 획득하기 위해 고해상도 에피스코픽 현미경을 사용하는 상세한 프로토콜을 설명합니다. 이 개선된 프로토콜은 변형된 조직 준비 방법을 사용하여 형광 염료의 침투를 향상시켜 소형 및 대형 표본 모두에 대한 형태 분석을 가능하게 합니다.

3 차원 영상의 신속한 획득 고해상도 Episcopic 현미경을 사용하여

동적 홀로그램 3D의 제작을 위해 초미세 입자 실버 할로일화물 홀로그램 에멀젼에 동일한 밝기, 투명도 및 균일 한 색상을 보여주는 매우 사실적인 풀 컬러 아날로그 홀로그램 세트를 기록하는 프로토콜을 제시합니다. 표시.

움직이는 홀로그램 디스플레이에 사용하기 위해 매우 사실적인 풀 컬러 아날로그 홀로그램 녹화

학습하세요 디지털 프린지 투영 기술을 사용한 고해상도 고속 3차원 비디오 촬영 방법을. 이진 디포커싱 시스템으로 실시간 동적 표면 측정이 가능하며 의료 영상 및 모션 캡처에 활용됩니다.

디지털 프린지 프로젝션 기술을 사용한 고해상도, 고속, 3차원 비디오 이미징

더 많은 동영상 탐색