연구 논문

인공지능 보조 3D 모델링을 기반으로 한 건강 응용 분야의 공학 기술 시각 평가 연구

DOI:

10.3791/69747

2026년 2월 13일

이 논문에서

요약

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

이 연구는 기하학적, 행동적, 인지적 표지자를 포함하는 의료 3D 모델링에서 공학 역량을 객관적으로 측정하기 위한 다중 모달 AI 기반 방법론을 제시합니다. 베이지안 분석과 실시간 시각 분석의 융합은 다양한 과제와 참가자 숙련도에서 검증된 정확한 기술 평가를 가능하게 합니다.

초록

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

인공지능(AI) 지원 3D 모델링은 현대 의료의 중심이 되었지만, 임상 사용 디지털 모델의 엔지니어링 역량을 반복 가능하고 확장 가능하게 평가하는 방법은 여전히 부족합니다. 기존의 품질 검사는 모델링 워크플로우, 운영자의 행동, AI 지원과의 상호작용 등을 고려하지 않고 최종 메시 결과물에 집중하는 경향이 있습니다. 이 격차는 재현성, 효과적인 교육을 저해하고 규제 준수를 제한합니다. 이 연구는 건강 중심의 3D 모델링 작업 중 엔지니어링 기술을 측정하고 전달하도록 설계된 최초의 종단 간 시각 분석 프레임워크를 제안합니다. 제안된 프레임워크는 기하학적 정확성부터 운영 숙련도, 인지 적응력에 이르기까지 도메인별 기술 개념을 정의하고, 해석 가능한 행동, 기하학, 생리학적 지표 집합을 통해 이러한 차원을 정량화합니다. 이 모듈은 4계층 아키텍처 내에서 다중 모달 데이터 수집, 경량 딥러닝 모델을 통한 실시간 특징 추출, 연속적 역량 추정을 위한 베이지안 증거 융합, 직관적인 시각적 피드백 모듈을 통합합니다. 이 시스템은 전문가의 주석 요구를 최소화하는 온라인 능동 학습 메커니즘을 통해 새로운 도구와 모델링 시나리오에 대한 보정을 유지합니다. 이 프레임워크는 60명의 참가자가 정형외과 임플란트 설계와 혈관 재건에 관한 두 가지 임상적으로 현실적인 모델링 과제를 수행하며 테스트되었습니다. 결과는 전문가 평가와 강한 일치, 기술 수준 간 명확한 구별, 그리고 미래 모델링 품질에 대한 의미 있는 예측을 보여주었습니다. 파이썬은 각각 상관관계, 회귀, 타당도 검사, 시각화 작업에 사용되었습니다. 사용성 테스트에서는 높은 수용률을 보였으며; 참가자들은 자기 주도적 개선을 지원하는 시각적 피드백의 명확성을 매우 높이 평가했습니다. 궁극적으로 이 제안된 프레임워크는 3D 모델링 평가를 정적인 결과 단면에서 다중 모달 증거에 기반한 역동적이고 과정 중심의 검토로 재구성합니다. 그 결과, 건강 관련 3D 모델링 워크플로우의 교육, 인증, 규제 감독을 위한 실용적이고 해석 가능하며 확장 가능한 솔루션이 탄생했으며, 의료 설계에서 미래의 인간-AI 협업 및 역량 분석의 기반이 되었습니다.

서론

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

의료 분야에서 AI 기반 3D 모델링의 빠른 시장 수용은 임플란트, 가이드, 해부학적 재구성 제작 방식을 바꾸고 있지만, 이 분야는 여전히 이러한 모델들의 엔지니어링 능력을 신뢰할 수 있는 평가 방법이 없습니다. 오늘날 지배적인 관행은 최종 제품 검사에 크게 의존하고 있는데, 이는 기하학적 오류를 발견하는 데 유용하지만 모델링 워크플로우, 사용자-AI 상호작용, 순간순간 의사결정 등 다양한 부분을 제대로 반영하지 못합니다. 따라서 임상 팀은 모델이 유능하고 반복 가능한 과정을 통해 만들어졌는지, 아니면 행운의 시행착오로 만들어졌는지 판단하지 못하는 경우가 많습니다. 이 격차는 점점 더 중요해지고 있습니다. 병원, 규제 기관, 3D 프린팅 프로그램은 이제 단순한 최종 메쉬가 아니라 전체 워크플로우의 일관된 품질을 입증할 증거를 요구합니다. 모델링 오류는 수술 안전성, 기기 적합성, 제조 추적성에 영향을 줄 수 있기 때문입니다. 행동, 인지, 절차적 측면을 통합적이고 체계적이며 확장 가능하게 모델링 기술을 포착(또는 계산)하는 현재의 방법은 없습니다. 이것이본 논문의 주요 동기이지만, 해부학 중심의 AI 보강 모델링에 대한 "워크플로우 역량"의 운영적 정의는 제시되지 않았습니다. 이러한 규제 기대와 일상 관행 간의 간극이 현재 연구의 첫 번째 동기입니다. 두 번째 동기는 교육적 이유입니다. 헬스테크 스타트업과 대학 병원은 신입 직원을 6개월에서 18개월 동안 시니어 모델러와 짝지어 교육합니다. 이 접근법은 효과적이지만 확장성은 낮습니다: 2020년부터 2024년 사이에 AI 기반 의료 CAD 좌석의 전 세계 설치 기반은 340% 증가한 반면, 자격을 갖춘 멘토 풀은4석에 머물렀습니다. 실시간으로 모니터링, 진단, 코칭이 가능한 시각 분석 시스템은 교육 처리량과 멘토 가용성을 분리하고, 방사선사나 간호사 같은 비전통적 진입자들이 점점 프론트엔드 세분화를 수행하는 데 학습 곡선을 단축할 것입니다.

셋째, 인지과학 논쟁이 있습니다. 의료 모델링은 공간 추론, 해부학적 지식, 소프트웨어 활용도를 결합한 고위험 수준의 시각적 문제 해결 변형입니다. 이러한 자원이 어떻게 조율되는지, 언제 붕괴되는지, 언제 AI에 아웃소싱되는지 이해하려면 눈, 손, 생리적 신호를 순간순간적으로 포착해야 합니다. 인간 전문성을 설명하는 동일한 데이터 흐름이 그것을 평가하는 데도 활용될 수 있어 연구와 응용 사이에 선순환을 만듭니다. (i) 수술 내 절차적 기술 평가와 (ii) CAD 메시5의 기하학적 품질 지표에 관한 풍부한 문헌에도 불구하고, 건강 중심의 AI 지원 3D 모델링에서 공학 기술의 두 시각적 평가가 교차하는 부분은 여전히 충분히 탐구되지 않고 있습니다. 구체적으로, 기존 평가 루브릭에는 도메인별 기술 체계가 없어, 혈관 분기각과 같은 해부학적 중요한 특징을 볼트 구멍과 같은 일반적인 기계적 특징과 동일하게 다룹니다. 척추 충전재 다공성이나 골절개 곡률 한계와 같은 해부학적 기반 제약은 채점 함수에 포함되지 않습니다. 분할 센싱과 관련해, CAD, 수술 시뮬레이션, VR 게임에서의 프로세스 캡처 연구는 운동학, 시선, 생리학, 음성 정보를 1초 미만의 해상도6으로 동기화하는 경우가 드뭅니다. 따라서 교차 모달 검증은 불가능하며, 각 채널의 추가 가치는 알 수 없습니다. 7. 정적 점수 산정과 관련해서는, 현재 도구들은 일반적으로 세션 후 이진 합격/실패 라벨을 생성합니다. 새로운 증거가 도착할 때 학습자의 역량에 대한 불확실성을 표현하거나 신념을 갱신하는 원칙적 방법이 부족하는데, 이는 베이지안 인증 프로토콜의 중요한 요구사항입니다8. 마지막으로 피드백 불연속성에 관해서는, 풍부한 데이터가 수집되더라도 종종 사후 검토를 위해 저장되거나 원시 곡선으로 표시됩니다. 저수준 신호를 실시간으로 실행 가능한 조언으로 매핑하는 이론에 맞춰진 역할별 시각 계층은 현재 존재하지 않습니다 9,10. 이 네 가지 단점은 실질적인 고통으로 이어집니다: 3D 프린팅 해부학 가이드의 30%는 여전히 수작업 재작업이 필요하며, FDA는 원래 엔지니어가 허용 오차주석 11을 오해해 분기마다 2-3건의 환자별 임플란트 배치를 리콜합니다. 따라서 다중 모달 센싱에서 해석 가능한 피드백까지 루프를 닫는 종단 간 프레임워크가 필요합니다.

의료 3D 모델링은 산업 CAD와 세 가지 측면에서 기술 평가에 직접적인 영향을 미칩니다: 해부학적 기하학은 비모수 기하학, 오류 허용성은 거의 0, 그리고 규제 추적성이 필수입니다12. 지배적인 평가 패러다임은 여전히 최종 다각형 메쉬나 STL 파일에 대한 총괄적 전문가 검토입니다. 일반적인 루브릭은 금본위형에서의 기하학적 편차, 위상 다양체성, 의사가 지정한 랜드마크의 존재를 점검합니다. 검사가 수작업이기 때문에 평가 간 코헨의 κ는 거의 0.6513을 넘지 않는다. Mimics Innovation Suite와 3D Slicer와 같은 상업용 플랫폼은 메시 품질에 대해 합격/실패 플래그를 제공하지만, 이 플래그는 결정론적(삼각형 종횡비, 교차하는 면)이며 실제 모델링 궤적을 무시합니다. AI 기반 3D 시각화는 해부학적 이해를 향상시키지만, 효과적인 사용은 운영자의 모델링 능력에 크게 의존합니다. VDR은 정확한 체적 이미지를 제공하지만, 사용자가 이러한 모델을 어떻게 해석, 정제, 조작하는지 평가할 구조화된 방법은 없습니다. 본 연구는 AI 지원 3D 모델링의 역량을 평가함으로써 이 격차를 해소합니다15. 저자들은 30Hz에서 스크롤과 도구 호출 이벤트, 그리고 3D 커서 좌표를 함께 기록합니다. 이들은 장기 단기 기억(LSTM) 자동 인코더를 사용해 기계식 CAD에서 '비효율적인 공구 경로'를 감지하며, 인간 라벨에 대해 0.81의 F1 점수를 달성합니다. 시각적 주의 분석으로 확장하여, TAP-3D 데이터셋16에는 솔리드 워크스 연습을 수행하는 120명의 엔지니어들의 시선 데이터가 포함되어 있습니다. 고정-사케이드 시퀀스는 128차원 단어 2vec 벡터로 인코딩되며; 클러스터링은 모델링 시간과 유의미한 상관관계를 가진 다섯 가지 뚜렷한 시각적 전략을 보여줍니다(R = 0.73). 사용자 상호작용 지표를 넘어, Mandal, A. 및 Ghosh, A. R.17은 CAD 모델에서 파생된 3D 디지털 지형에 훈련된 3D CNN을 사용하여 복잡한 조직공학 스캐폴드의 기계적 특성을 추정합니다. 이 접근법은 스캐폴드 거동을 정확히 예측하며, 다공성 및 메타물질 구조에 대해 AI 지원 설계 경로를 더 빠르게 제공합니다. 그러나 그 예측의 재현 가능성은 특히 매우 불규칙한 기하학적 또는 제조 결함이 있는 데이터셋의 다양성에 의해 영향을 받습니다.

쇤펠트, N., 핸콕, P., 버트, J.의 최근 연구18 음성 및 사고 프로토콜까지 데이터 캡처를 확장했으며, 구두 해설을 200D BERT 임베딩에 전사하여 소프트웨어 작업에서의 디버깅 성공과 연관지어18. 의료 모델러는 프로그래머보다 말이 적지만, 우리 연구실의 파일럿 녹음에 따르면 "이 능선이 시끄러워 보인다"와 같은 발화가 이후 실행 취소 이벤트의 40%와 일치하여 예측 가치를 시사합니다. 이 연구들은 절차적 데이터가 눈에 띄지 않게 캡처될 수 있으며, 머신러닝 모델이 데이터를 성능 구조에 매핑할 수 있음을 보여줍니다. 하지만 그 중 어느 것도 해부학적 변동성과 AI 지원이 추가적인 복잡성을 더하는 건강 전용 3D 모델링을 목표로 하지 않습니다. 시각 분석은 수술 시뮬레이션과 로봇 훈련에서 형성적 피드백에 널리 채택되었습니다. MiEye 시스템19 녹화된 복강경 영상에 색상 구분된 오차 히트맵을 겹쳐 표시합니다; 연수생은 이진 피드백보다 26% 더 빠르게 향상됩니다. CAD 교육을 위해 Chou, Y. H. 외 연구진.20 학생 지수(특징 수, 재구성 시간, 재구성 오류)와 클래스 백분위수를 대조하는 레이더 차트를 제안하고; 차트에 접근할 수 있는 학생들은 시험 후 점수가 0.35 표준편차 상승한 것을 보입니다. 실시간 시각화는 아직 충분히 탐구되지 않았습니다. 킴, I.-J. 그리고 쿠테이네, H. H.21 VR에서 반투명 리본으로 실시간 운동 데이터를 렌더링하지만, 그 메트릭은 순전히 위치 오류에 불과합니다; 인지 부하도 해결되지 않습니다. 우리가 아는 한, 기하학적, 행동적, 생리학적 흐름을 AI 지원 의료 3D 모델링에 맞춘 단일 해석 가능한 실시간 시각 피드백 계층으로 결합한 기존 프레임워크는 없습니다. 이 리뷰는 이 연구가 해결하려는 네 가지 구체적인 단점을 드러냅니다: 건강 특화 기술 개념의 부족: 현재 루브릭은 의료 모델링을 일반적인 CAD로 취급합니다; 이들은 다공성 뼈 충전이나 혈관 분기각과 같은 해부학적 제약을 무시합니다. 단편적 감각: 연구는 보통 단일 양상(운동학, 시선, 생리학)을 활용합니다. 2초 이하 수준에서의 다중 모달 동기화는 거의 시도되지 않으며, 교차 모달 검증도 부재합니다. 베이지안 업데이트나 온라인 신뢰 추적은 모델링 기술에 적용되지 않았으며; 따라서 평가자는 과제가 진행되는 동안 불확실성을 표현하거나 새로운 증거를 반영할 수 없습니다. 피드백 불연속성: 풍부한 데이터가 수집되더라도 사후 검토를 위해 저장되거나 원시 곡선으로 표시됩니다. 저수준 신호를 실시간으로 실행 가능한 이론적 피드백으로 매핑하는 원칙적인 시각적 계층은 없습니다. 이러한 격차는 (i) 건강 적용 요구사항에 기반한 다차원 기술 구성을 정의하고, (ii) 보정된 베이지안 추론을 통해 이질적인 절차 데이터를 융합하며, (iii) 진화하는 신념 상태를 구현하는 종단 간 프레임워크 개발을 정당화합니다 via 역할에 특화된 인터랙티브한 시각화 기능. 실질적인 측면에서 제안된 프레임워크는 병원에 품질 모델링을 위한 실시간 모니터링 도구를 제공하고, 긴 전문가 검토 주기에 대한 의존도를 줄이며, 환자별 기기의 임상 사용을 더 안전하게 가능하게 합니다. 교육 센터는 이 프레임워크를 활용해 학습자 개발을 촉진하고 코호트 간 표준화된 역량 벤치마크 수립을 지원하는 구조적이고 데이터 기반의 피드백을 제공할 수 있습니다. 규제 당국을 위해 제안된 프레임워크는 의료 3D 프린팅 공정의 지속적인 검증에 대한 신흥 요구사항과 일치하는 워크플로우 역량을 문서화할 수 있는 감사 가능하고 투명한 메커니즘을 제공합니다. 이러한 동기를 바탕으로, 본 연구는 AI 지원 건강 중심 3D 모델링에서 엔지니어링 역량을 정량화하는 시각 분석 프레임워크를 설계하고 검증합니다. 구체적으로, 이 프레임워크는 다공성 뼈 충전, 혈관 각도 및 기타 해부학 관련 허용 차에 기반한 다차원 기술 구성을 정의하는 것을 목표로 합니다; 시선, 손 움직임, 생리적 신호, AI 상호작용 데이터를 초소급 해상도로 동기화하는 것; 베이지안 업데이트를 통해 이러한 이질적인 데이터 스트림을 융합하여 명확한 신뢰를 가지고 진화하는 역량 신념을 생성하는 것; 실시간 레이더 차트, 히트맵, 3D 주석을 통해 즉각적인 코칭이나 인증 목적으로 이 믿음을 전달하는 것; 그리고 평가 정확도를 최소 90% 이상 유지할 것입니다 via 새로운 프린터, AI 모델, 임상 규칙에 완전한 재교육 없이 적응하는 능동 학습 보정.

본 연구는 두 가지 핵심 질문을 다룹니다: 멀티모달 데이터 융합이 전문가 평가에 비해 기술 평가의 정확도를 향상시키는지, 그리고 베이지안 업데이트가 전체 모델 재학습 없이 평가 정확도를 유지할 수 있는지 여부입니다.

액세스가 제한되었습니다. 이 콘텐츠를 보려면 로그인하거나 체험판을 시작하세요.

프로토콜

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

이 연구는 인간 참여자를 포함했으며, 상하이 국제학대 시안다 경제인문학대학 인문연구윤리위원회(승인번호 2025XD1221)에서 검토 및 승인을 받았습니다. 모든 참가자는 사전 동의서에 서명하고 30분간의 사전 실험 교육을 완료했습니다: EG 참가자들은 프레임워크의 시각적 피드백(레이더 차트, 히트맵)을 해석하는 법을 배웠고, CG 참가자들은 플랫폼 운영 교육만 받았습니다. 데이터 수집의 정확성을 보장하기 위해 사전 실험에는 시력 추적기와 생리학적 센서의 5분 보정도 포함되었습니다.

연구 목표 및 프로토콜 개요

본 연구의 목적은 다중 모달 획득, 특징 추출, 베이지안 융합, 시각적 피드백을 통합하여 해석 가능한 방식으로 엔지니어링 기술을 평가하는 폐쇄 루프 종단 간 시스템을 만드는 것이었습니다. 그림 1 은 인공지능 지원 3D 모델링을 기반으로 한 건강 응용 분야의 공학 기술 평가를 위한 프로토콜 다이어그램을 보여줍니다.

프레임워크 개요 및 계층적 논리

본 연구에서 제안된 AI 지원 3D 모델링 건강 응용 분야의 공학 기술 시각 평가 프레임워크는 "데이터 기반 - 특징 추출 - 근거 융합 - 시각적 피드백"이라는 폐쇄 루프 논리를 기반으로 구축되었습니다. 핵심 목표는 다중 모달 원시 데이터를 해석 가능한 기술평가 결과로 종단 간 변환을 달성하는 것입니다. 공학 기술 평가를 위한 다중 모달 특징의 신뢰성 높은 추출을 보장하기 위해, 이 프레임워크는 상호작용, 생리학적, 시선, 제스처, 음성 신호를 밀리초 단위의 시간 동기화와 동시에 포착합니다. 이 프레임워크는 네 개의 핵심 계층으로 구성된 계층적 아키텍처 설계를 채택합니다: 다중 모달 데이터 획득 계층(L1), AI 특징 추출 계층(L2), 증거 융합 및 점수 엔진(L3), 시각적 피드백 계층(L4). 각 계층은 표준화된 데이터 인터페이스를 통해 양방향 상호작용을 구현하며, 평가 결과의 동적 타당성을 보장하기 위해 프레임워크 보정 모듈(L5)이 동시에 도입됩니다. 그림 2 는 AI 기반 특징 추출, 베이지안 점수, 실시간 시각 및 시청각 피드백을 통한 다중 모달 데이터(시선, 운동학, 생리학, 음성 등)를 통해 시작하여 종단 간 파이프라인을 보여줍니다. 레이어들은 상호작용적이며, 레이어 5는 연속적인 보정을 제공합니다. 이 아키텍처는 실시간 3D 모델링 작업에 참여하면서 참가자들이 조정된 처리와 검증된 기술 추정을 가능하게 합니다.

식(1) 베이지안 신뢰 업데이트 공식:

figure-protocol-1

여기서 P(θ)는 기술 수준 θ의 사전 확률(과거 평가 데이터 기반)을 나타내며; P(D∥θ)는 숙련도 수준 θ 하에서 다중 모달 특징 데이터를 관찰할 확률을 나타내며; P(D)는 한계 확률이며; P(D∥θ)는 데이터 D를 융합한 후 기술 수준 θ가 사후 확률, 즉 최종 신뢰 점수입니다. 이 프레임워크는 구조화된 델파이 및 AHP 접근법23 을 사용하여 지표를 가중치로 평가했습니다. 정형외과 의사, 생의학 엔지니어, 경험 많은 의료 CAD 모델러 등 10명의 주제 전문가 패널이 델파이 3라운드에 참여하여 전문가 점수가 안정될 때까지 9점 리커트 척도로 지표의 중요성을 평가했습니다(변동계수 <0.15)24. 그 후 전문가들의 수렴/분산 점수를 사용하여 AHP 일관성 기준을 사용하여 쌍별 비교 행렬을 구축하고 일관성 비율(CR) 0.1< 확인했습니다. CR이 0.1을 초과하면 행렬이 재조정되었습니다. AHP 방법의 쌍별 비교 행렬의 일관성 비율은 0.03에서 0.08 사이로, 다층 계층적 접근법 전반에 걸쳐 높은 내부 논리적 일관성을 나타냈다. 프레임워크 내 각 계층의 설계는 "모듈화 - 확장성" 원칙을 따릅니다. 예를 들어, L1층은 생리학적 데이터 수집 차원을 바이오센서를 추가하여 확장할 수 있습니다; L2 계층은 사전 학습된 모델을 대체하여 다양한 건강 응용 분야의 기술 평가 요구에 적응할 수 있습니다; L4 계층은 사용자 역할에 기반한 맞춤 시각화 차원을 지원합니다. 이는 이후 의료 3D 모델링 교육과 전문 기술 인증 시나리오에 대한 유연성을 제공합니다.

다중 모달 데이터 수집 계층

3차원 상호작용 이벤트 스트림

이 모듈은 AI 지원 3D 모델링 플랫폼에서 소프트웨어 플러그인(16) 을 통해 엔지니어의 운영 데이터를 수집하며, 이산 작업 이벤트와 연속 매개변수 데이터를 모두 포함합니다. 이산 이벤트에는 모델 선택, 정점 조정, AI 도구 호출이 포함되며, 연속 매개변수에는 속도, 실행 취소/재실행 횟수, AI 제안 수락률 모델링이 포함됩니다. 각 이벤트는 13자리 타임스탬프와 대응하는 3D 모델 좌표계 값(x, y, z)으로 기록됩니다. 예를 들어, 정형외과 임플란트 모델의 곡률을 조정할 때, 플러그인은 작업 시작과 종료 시간, 조정된 정점 좌표, 곡률 변화를 기록하여 구조화된 이벤트 로그를 형성합니다(데이터 필드는 표 1 부터 3 참조). 이 데이터는 맞춤형 알고리즘을 사용해 도메인별 기하학, 효율성, 인지 지표를 계산하여 건강 관련 응용 분야에서 모델링 행동을 세밀하게 특성화할 수 있게 합니다.

안구 운동과 제스처 신호

안구 움직임 데이터는 데스크톱 시력 추적기를 사용하여 3D 모델링 인터페이스의 고정점과 사카드 매개변수에 집중하여 엔지니어의 인지 주의 분포를 반영합니다.

제스처 신호는 깊이 카메라로 포착되며, 22개의 상지 주요 관절 좌표를 추출하여 일반적인 모델링 제스처25를 식별합니다. 카메라는 3D 제스처 좌표 데이터를 정규화된 벡터 시퀀스로 변환하여 개별 체격 차이를 완화합니다.

이 모듈의 데이터 동기화는 프레임워크의 통합 하드웨어 트리거(3D 모델링 소프트웨어의 10Hz 타임스탬프)에 의존하며, 동기화 오류는 ±50ms 이내(방정식 3-2 에 따라 계산됨)로 제어되어 눈/제스처 행동과 모델 링 연산 간의 시간적 상관관계를 보장합니다. 식(2)은 데이터 동기화 오차 계산을 제시합니다:

figure-protocol-2(2)

여기서 : Et = 장치 획득 시간(t장치)과 소프트웨어 타임스탬프(t소프트웨어) 간의 동기화 오류; T장치 = 시선 추적기/심도 카메라의 실제 획득 시간; T소프트웨어 = 3D 모델링 소프트웨어의 트리거 타임스탬프.

생리학적 및 음성 데이터

생리학적 데이터는 착용형 센서 를 통해 수집됩니다: 엔지니어의 팔뚝에 부착된 근전도(EMG) 센서(1000 Hz 샘플링 주파수) 27은 정밀 작업 중 근육 긴장을 기록하여 작동 안정성을 반영합니다. 심전도(ECG) 센서(250 Hz 샘플링 주파수)28: 심박변이성(HRV) 지표를 수집하기 위해 가슴에 착용하며, 이는 인지 부하를 특징짓습니다. 음성 데이터는 지향성 마이크로폰(44.1 kHz 샘플링 주파수)으로 수집되며, 모델링 중 엔지니어의 음성 발언을 녹음하여 인지 상태 분석을 보완합니다. 모든 생리적 및 음성 데이터는 타임스탬프가 부착된 다중 모달 데이터베이스에 저장되기 전에 전처리를 거칩니다. 그림 3 은 물리적 실험용 하드웨어 구성을 보여줍니다. EMG/ECG 웨어러블, 마이크, 아이 트래커, 그리고 깊이 카메라의 센서 데이터가 모두 3D 모델링 워크스테이션에 연결되어 있습니다. 시간 데이터가 멀티모달 데이터베이스에 저장되기 전에, 동기화 모듈이 모든 스트림을 조정합니다(±50ms 이내). 이 재료 명세는 신뢰할 수 있고 시간적으로 정렬된 입력을 특징 추출 및 점수 작성 파이프라인에 제공합니다.

AI 특징 추출 계층

기하학적 품질 지표

이 모듈은 3D 상호작용 이벤트 스트림과 최종 모델 출력에서 3D 모델의 정확성과 합리성을 반영하는 정량적 특징을 추출하여 엔지니어의 "모델링 정밀도" 능력을 평가하는 핵심 기초가 됩니다. 편차, 위상학, 템플릿 기반 특징 지표를 사용하여 구조적 정확성, 해부학적 일치, 3D 모델 완전성을 평가하기 위해 세 가지 주요 지표가 설계되며, 계산 방법과 물리적 의미는 아래에 자세히 설명되어 있습니다:

모델 편차율(MDR)

이는 엔지니어가 모델링한 결과와 표준 템플릿 간의 기하학적 편차를 측정합니다. 편차는 두 모델 간 주요 특징점들의 유클리드 거리를 비교하여 계산됩니다. 공식은 식(3)에 나타난다:

figure-protocol-3(3)

여기서 : n = 사전 정의된 주요 특징 포인트 수(모델 복잡도에 따라 50-100개로 설정); Pi,engineer = 엔지니어 모델 내 i번째 특징점의 3D 좌표; Pi,standard = 표준 템플릿의 i번째 특징점의 3차원 좌표; |⋅| = 유클리드 거리 연산자.

MDR이 낮을수록 표준 모델과의 일관성이 더 높으며, 적격 건강 적용 모델의 임계값은 ≤ 5%입니다. 모델링 역량은 시간 효율성, 중복 이동, 제스처 안정성, 실시간 3D 운영 시나리오 중 제안된 AI 도구의 사용 패턴을 기반으로 평가되었습니다.

위상 일관성 (TC)

이는 3D 모델의 위상 구조가 의료 응용 요구사항을 충족하는지 평가합니다. 지시기는 위상 결함(D)의 개수와 모델 내 위상 요소의 총 수(T, 정점, 간선, 면 합)를 세어 계산되며, 이는 식(4)에 나타난 것입니다:

figure-protocol-4(4)

예를 들어, 무릎 관절 모델에 2개의 비다양체 간선(D = 2)과 총 위상 요소 1200개(T = 1200)가 포함되어 있다면, 이는 99.83%입니다. 의료 모델의 제조 위험을 피하려면 ≥ 98%가 요구됩니다.

기능 완전성(FC)

이는 엔지니어가 건강 애플리케이션 모델의 모든 필수 기능을 완전히 구현했는지 평가합니다. 이 지표는 완료된 필수 기능(F완료)과 작업 요구사항에 정의된 필수 기능 총 수(Ftotal)를 비교하여 결정됩니다:

figure-protocol-5(5)

행동 효율성 지표

이 모듈은 3D 상호작용 이벤트 스트림과 제스처 신호를 처리하여 엔지니어의 모델링 작업 효율성을 반영하는 특징을 추출하고, 그들의 "운영 숙련도" 능력을 평가합니다. 모델링과 관련된 인지 요구는 동기화된 생리학, 시선 및 EMG 신호를 사용하여 측정하였습니다. 이 지표들은 모델링 과정 중 시간과 업무량 변동에 따른 주의 분산을 추적합니다.

시간 효율 모델링 (MTE)

이는 엔지니어의 실제 모델링 시간(Tactual)과 같은 작업에 대한 선임 전문가들의 평균 시간(T전문가)과 0-100 점수로 정규화된 비교입니다:

figure-protocol-6(6)

예를 들어, 엔지니어가 전문가들이 평균 30분 걸리는 작업을 45분 만에 완료한다면, 100 - (45 - 30) x 50 = 75가 되어 중간 정도의 효율성을 나타냅니다.

중복 운행률(ROR)

이는 모델링 과정에서 불필요한 연산의 비율을 계산합니다. 중복 연산 수(O중복)와 총 연산 수(O)의 비율로 계산됩니다:

figure-protocol-7(7)

중복 연산은 규칙 매칭과 제스처 일관성 분석을 통해 AI 알고리즘에 의해 식별됩니다.

AI 도구 활용률 (ATUR)

이는 AI 보조 기능을 활용해 효율성을 높이는 엔지니어의 능력을 측정합니다. 이는 AI 도구 호출 횟수(IAI)와 전체 도구 호출 횟수(Itotal)의 비율로 정의됩니다:

figure-protocol-8(8)

높은 ATUR은 AI 도구가 모델링 과정에 더 잘 통합되었음을 의미하며, 이는 현대 의료 3D 모델링에서 핵심 기술입니다.

제스처 부드러움 (GS)

이는 모델링 중 엔지니어의 상지 움직임의 안정성을 평가합니다. 이 지표는 22개의 상지 키 관절(vj) 속도의 표준편차를 시간에 따라 계산합니다:

figure-protocol-9(9)

표준 편차가 낮을수록 제스처가 더 부드럽다는 의미로, 더 높은 운영 숙련도를 반영합니다. 이 지표들은 모델링 과정에서 실시간으로 추출되며, AI 알고리즘이 5분마다 지표 값을 업데이트하고 이후 융합을 위해 특징 데이터베이스에 저장합니다.

인지 부하 지표

이 모듈은 안구 운동 신호와 생리학적 데이터를 분석하여 모델링 중 엔지니어의 인지 부하를 정량화하고, 그들의 '인지 적응력' 능력을 평가합니다. 다중 모드 지표는 Delphi-AHP 접근법과 베이지안 근거 업데이트를 통해 실시간 확률적 공학 기술 점수를 출력하기 위해 가중치를 부여했습니다. 세 가지 주요 지표가 개발됩니다:

고정 분산(FD)

이는 엔지니어의 시각적 주의력의 분포를 반영합니다. 이는 3D 모델링 인터페이스에서 2분 윈도우 동안 최대 고정점 좌표((xmax, ymax) 및 (xmin,y min) 사이의 유클리드 거리로 계산됩니다:

figure-protocol-10(10)

FD가 클수록 주의력이 산만함을 나타내며, 종종 높은 인지 부하와 연관됩니다.

심박 변이성(HRV) - SDNN

SDNN(정상에서 정상 간격의 표준편차)은 심전도 데이터에서 추출하여 엔지니어의 심박수 변동을 측정합니다. SDNN이 낮을수록 교감신경 활동이 증가하여 인지 부하가 증가함을 나타냅니다. AI 알고리즘은 먼저 ECG 잡음을 필터링(웨이블릿 변환을 통해 ) 다음 식(11)을 사용하여 SDNN을 계산합니다:

figure-protocol-11(11)

여기서: N = 5분 창 내 정상 심장 박동 수; RRk = k번째와 (k + 1)번째 정상 심장 박동 사이의 시간 간격; figure-protocol-12 = 창 내 평균 RR 구간.

근전도(EMG) - 평균근 (RMS)

팔뚝 근전도 신호의 RMS는 근육 긴장을 반영하며, RMS가 높을수록 인지 스트레스로 인한 근육 경직이 증가함을 나타냅니다. 계산 공식은 다음과 같습니다:

figure-protocol-13(12)

여기서 m은 1분 창 내 EMG 신호 샘플 수, EMG(t) = 시간 t에서의 EMG 신호 진폭입니다. 개념적 명확성을 돕고 연구의 재현을 용이하게 하기 위해 요약 다이어그램이 제작되었습니다. 이 보고서는 10개의 평가 지표 간의 계층적 관계와 제안된 프레임워크의 세 가지 주요 개념인 기하학적 품질, 운영 효율성, 인지적 적응성 간의 관계를 보여줍니다. 이 도표는 다중 모달 입력 신호가 측정 가능한 지표로 변환되고, 이후 베이지안 접근법을 통해 융합되어 복합 공학 기술 점수를 생성하는 과정을 보여줍니다. 이 개요는 평가 논리의 간결한 버전을 전달하며, 이 연구의 방법론적 투명성을 형성 및 향후 교육 및 규제 방향에 높이고 있습니다. 그림 4 는 제안된 공학 기술 평가 프레임워크의 계층적 구조를 보여주며, 10개의 다중 모드 지표를 기하학적 품질, 운영 효율성, 인지 유연성의 세 가지 기본 개념으로 조직합니다. 이러한 요소들은 AI 지원 3D 모델링 성능을 평가하는 데 사용되는 전반적인 기술 결과에 기여합니다.

증거 융합 및 점수 추출 엔진

표시 가중치 할당 (델파이 + AHP)

이 모듈은 Delphi 방법(전문가 합의)과 분석 계층 프로세스(AHP)를 결합하여 추출된 10개의 지표(3개의 기하학적 품질 지표, 4개의 행동 효율성 지표, 3개의 인지 부하 지표)에 가중치를 부여하고, 이 복잡한 다중 모드 지표들을 시각적이고 해석 가능한 형식으로 표현함으로써 다차원 특징 간 차별적 중요성 문제를 다룹니다. 예를 들어, 레이더 차트, 히트맵, 생의학 관련 진단 추론을 위한 주석 재생 등이 있습니다.

델파이 합의 단계

10명의 전문가 패널이 익명 설문지 3라운드에 걸쳐 9점 척도(1 = "가장 중요도", 9 = "가장 중요한")를 사용하여 각 지표의 중요성을 평가했습니다. 각 라운드 후에는 평균 점수와 변동 계수(CV)로 구성된 통계적 피드백이 패널에 제공되어 점수 조정을 촉진했습니다. 수렴은 각 지표에 대해 CV ≤ 0.15로 정의되었습니다. 특히, 모델 편차율(MDR)과 AI 도구 활용률(ATUR)과 같은 지표에 대한 합의는 두 번째 라운드에서 일반적으로 달성되었으며, 이는 직접적인 임상적 관련성 때문이었습니다.

기술적 견고성을 보장하기 위해 프로토콜은 다중 모달 데이터 정렬(동기화 허용 ≤ 50ms; 30Hz 통합 트리거 클럭)과 지시 계산 방법을 표준화했습니다. 예를 들어, MDR은 50-100개의 해부학적 핵심 지점에서 도출되었고, 결함 없는 요소의 경우 위상 일관성(TC) 임계값은 >98%로 설정되었습니다. 이러한 임계값은 다공성 골에 대해 < 5% 편위, 혈관 분기각에 대해 < 3° 오차와 같은 임상적 관용 기준에 근거하여 정당화되었습니다. 더불어, 이 방법론은 베이지안 점수 채점과 가우스 가능도 모델링(서로 다른 기술 계층에 대한 보정된 σ 범위 사용)을 포함했으며, 배치 크기는 32, 학습률은 1 x 10-4, 120 에포크로 훈련된 CNN-LSTM 특징 추출기를 사용했습니다.

AHP 계층 구조 설립

세 단계 계층 구조가 구축됩니다: 목표 계층 (A): 공학 기술 종합 평가; 기준 계층 (B): 3개의 1차 지표 (B1: 기하학적 품질, B2: 행동 효율성, B3: 인지 부하); 지시계 계층(C): 10개의 2차 지표(C1: MDR, C2: TC, ..., C10: EMG RMS).

쌍별 비교 및 일관성 검사

델파이 합의 결과를 바탕으로 기준층과 지표층에 대해 쌍별 비교 행렬이 구성됩니다. 기준층을 예로 들면, 행렬은 다음과 같이 정의됩니다:

figure-protocol-14(13)

여기서a: a ij 는 Bj와 Bj의 중요도 비율이다. 기준층의 가중 벡터(WB = [wB1,w B2,w B3])는 고유벡터 방법을 통해 계산됩니다. 논리적 모순을 피하기 위해 일관성 비율(CR)은 식(14)을 사용하여 검증합니다:

figure-protocol-15(14)

여기서 (λmax = 행렬의 최대 고유값, = 지시자 개수), 는 무작위 일관성 지수(n = 3, RI = 0.58)입니다. CR이 0.1<면 결과는 허용 가능합니다.

이 과정을 통해 일반적인 가중치가 산출됩니다: (기하학적 품질), (행동 효율성), (인지 부하); 지표층 내 MDR 중치(C1)는 보통 가장 높고(~0.25), EMG RMS(C10)는 가장 낮으며(~0.05) 있습니다.

베이지안 신뢰도 업데이트

이 모듈은 가중 지표들을 융합하여 최종 기술 신뢰도 점수를 산출하며, 실시간 다중 모달 데이터로 사전 확률을 업데이트하여 '단일 특징 평가의 불확실성'을 해결합니다. 이 과정은 방정식 (1)(베이지안 공식)에 기반하며, 두 단계로 구현됩니다:

1단계: 사전 확률 초기화 (P(θ))

기술 수준은 (초보자), (초급), (중급), (고급), (전문가) 5단계 등급으로 나뉩니다. 사전 확률은 과거 데이터를 사용하여 초기화됩니다: 시스템이 500명의 엔지니어를 평가했고, 그중 100명이 θ3으로 분류된다면, P(θ3) = 100/500 = 0.2입니다. 과거 데이터가 없는 신규 사용자의 경우, 모든 i에 대해 균일한 사전 (P(θi) = 0.2)가 채택됩니다.

2단계: 사후 확률 계산 (P(θ∥D))

다중 모달 특징 데이터는 10개의 정규화된 지표들의 가중 합입니다:

figure-protocol-16(15)

여기서 wCk는 k번째 지표의 가중치(3.4.1절에서), Ck노름 은 k번째 지표의 정규화된 값([0,1] 범위)이다.

우도 확률은 가우시안 분포를 사용하여 모델링되며, 기술자 수준의 특징 데이터(평균 μi, 분산 figure-protocol-17)가 따른다고 가정한다. 이 매개변수들은 200개의 라벨 샘플을 사용하여 보정됩니다.

마지막으로, 사후 확률은 식(3-1 )을 통해 계산되며, 최대값에 해당하는 기술 등급이 실시간 평가 결과입니다. 예를 들어, 엔지니어의 D = 0.72 그리고 (다른 등급보다 높음)이라면 "고급"으로 분류됩니다.

신뢰도 업데이트 과정을 시각화하기 위해, 그림 5 는 알려진 동일한 기술 확률이 베이지안 추론과 실시간 신호를 근거로 사용하여 사후 분포로 업데이트되는 과정을 보여줍니다. 과제를 관찰한 후, 모델은 가장 높은 사후 확률을 가진 기술 등급에 근거를 강화하도록 업데이트됩니다. 검증 테스트에서는 전문가 기술 등급의 강한 수렴 안정성이 나타났으며, 베이지안 점수는 전문가 등급과 강한 상관관계를 보여, 워크플로우에서 베이지안 업데이트의 신뢰할 수 있는 사용을 뒷받침했습니다.

이 계층의 출력은 종합 기술 점수(0-100, 최대 사후 확률에서 매핑됨)와 신뢰구간으로, 직관적으로 시각화하기 위해 시각적 피드백 계층에 전송됩니다.

시각적 피드백 계층

실시간 레이더 차트

이 모듈은 10개의 정규화된 지표와 3개의 3단계 기준 점수를 레이더 차트로 변환하여 엔지니어의 기술 강점과 약점을 직관적으로 비교할 수 있게 합니다. 레이더 차트는 7축으로 설계되었으며(1차 기준: B1-B3 3개는 3개; 2차 기준은 C1=MDR, C4=ATUR, C7=FD, C9=SDNN-선택된 높은 가중치와 해석 가능성 기준), 각 축 범위는 [0,100]으로 정규화되어 있습니다([0,1] 값에서 공식3-7 을 통해 매핑됨). 프레임워크 초기부터 전문가의 주석과 능동적 학습 업데이트를 통해 측정 정확도를 지속적으로 향상시키기 위해 건강 모델링 맥락과 성장하는 이해가 통합되었습니다.

식(16) 레이더 차트용 지시값 매핑:

figure-protocol-18(16)

여기서: V레이더 = 레이더 차트 축에 표시되는 값; Ck노름 = k번째 지표의 정규화된 값([0,1] 범위).

레이더 차트는 실시간(5분마다)으로 업데이트되며, 표준 벤치마크선(점선, V 레이 = 80, '고급' 기술 수준 임계값을 나타냄)과 전문가 평균선(점선, 50명의 선임 엔지니어의 과거 데이터를 바탕으로 계산됨)을 포함합니다. 그림 6 은 기하학적 품질, 인지 부하, 도구 사용 효율성, 고정 분산 등 주요 지표를 종합적으로 보여준 엔지니어의 행동을 해당 전문가 벤치마크와 비교하여 보여줍니다. 피드백 계층의 일부로, 융합된 지표를 사용한 진짜 점수가 해석 가능한 프로필로 변환되었습니다. 사용자 연구에 따르면 역량 격차를 신속히 발견하는 데 성공적으로 구현되었으며, 모델링 작업 중 개선을 위한 구조화된 데이터 기반 계산을 촉진했습니다.

시간 히트맵

이 모듈은 전체 모델링 과정 전반에 걸친 역동적인 기술 지표의 변화 추세를 시각화하여 엔지니어들이 어려움을 겪는 시기를 식별하는 데 도움을 줍니다. 히트맵은 2D 격자를 사용합니다: x축은 시간 구간(10분 단위, 2시간 작업당 총 12개 구간)을, y축은 5개의 주요 지표(C1=MDR, C4=ATUR, C6=GS, C7=FD, C9=SDNN)를 나타냅니다. 각 격자 셀의 색상 강도는 지시자의 정규화 값에 해당하며, 색상 척도는 파란색(낮은 값, 낮은 성능: Ck노름 < 0.5)에서 빨간색(높은 값, 좋은 성능: Ck노름 < 0.8)까지입니다. 이는 식(17)에 정의됨:

식(3-8)은 히트맵의 색상 강도 계산을 제시합니다:

figure-protocol-19(17)

여기서: Icolor = RGB 색상 강도 값 (0-255, 0=파랑, 255=빨강); min(Ck노름)과 max(Ck노름) = 모든 시간 구간에서 지시자의 최소 및 최대 정규화 값.

그림 7 은 10분 단위로 인지 부하, 고정 분산, 시선 안정성, 의사결정 지연 지표의 시간 해석 변화를 보여줍니다. 강조된 영역은 높은 인지 요구나 워크플로우 중단을 나타냅니다. 이 시간 관점은 전문가들의 주석으로 지원되는 통합된 다중 모달 스트림에서 직접 생성되어, 모델링 피로, 주의 전환, 과제별 어려움에 중요한 역할을 합니다.

D 재생 주석

이 모듈은 3D 모델의 동작 재생에 기술 평가 주석을 겹쳐 엔지니어의 모델링 행동을 단계별로 분석할 수 있게 합니다. 재생 속도는 실시간으로 조절 가능하며(0.5×-2× 실시간 속도), 다중 모달 데이터 타임스탬프와 동기화됩니다. 세 가지 유형의 주석이 삽입됩니다: 기하학적 오차 주석: 빨간색 와이어프레임은 MDR(C1)이 5%(기준 임계값)를 초과하는 모델 영역을 강조하며, 텍스트 라벨은 편차 값을 나타냅니다. 효율성 경고 주석: 중복 작업 위치에 노란색 느낌표가 나타나며, 작업 유형을 보여주는 팝업 창이 나타납니다. 인지 부하 주석: 모서리의 초록색/빨간색 상태 바는 실시간 인지 부하(C9: SDNN, C10: EMG RMS 기준)를 나타내며, 빨간색은 "고부하"(SDNN < 50ms), 초록색은 "정상 부하"(SDNN > 100ms)를 의미합니다.

프레임워크 교정 및 반복

전문가 주석 인터페이스

이 모듈은 고위 전문가들이 프레임워크의 평가 결과를 수정하고 라벨링할 수 있는 인간 인터페이스로, 건강 적용 시나리오 변화로 인한 '평가 정확도의 변동'을 해결합니다. 인터페이스는 결과 수정, 표시기 재가중치, 주석 저장의 세 가지 핵심 기능으로 설계되었습니다.

결과 보정 함수

전문가들은 먼저 시각적 피드백 결과와 프레임워크의 종합 기술 점수(0-100)를 검토합니다. 만약 점수가 전문가의 판단과 다르다면, 전문가가 수동으로 점수를 조정하고 이유를 기록할 수 있습니다. 보정 크기는 식(18) 을 통해 정량화됩니다:

figure-protocol-20(18)

여기서:S 보정 = 최종 보정 점수; S프레임워크 = 프레임워크가 출력한 초기 점수; Sexpert = 전문가 수동 점수; α = 수정 가중치(기본값은 0.8로 설정되어 전문가 판단이 우세하면서도 프레임워크 합리성을 유지함).

지표 재가중치 기능

시나리오별 보정을 위해 전문가들은 슬라이딩 바(0-0.5 범위)를 통해 개별 표시기의 가중을 조정할 수 있습니다. 인터페이스는 조정 후 일관성 비율(CR)을 자동으로 재계산하며(비논리적인 가중치 분포) 전문가에게 경고하여 조정된 가중치가 수학적으로 유효하도록 보장합니다.

주석 저장 기능

모든 수정된 점수, 조정된 가중치, 전문가의 의견은 타임스탬프와 시나리오 태그가 포함된 주석 데이터베이스에 저장됩니다. 이 데이터베이스는 이후 온라인 능동적 학습 모듈의 학습 데이터 역할을 하며, 표 2에 일반적인 데이터 스키마가 나타난다.

온라인 능동적 학습 업데이트

이 모듈은 주석이 달린 데이터를 사용하여 프레임워크의 핵심 알고리즘(L2의 AI 특징 추출 모델, L3의 베이지안 점수 엔진)을 반복적으로 최적화하여, 프레임워크가 완전한 재학습 없이도 새로운 건강 응용 시나리오에 적응할 수 있도록 합니다. 업데이트 과정은 위원회별 질의(QBC) 전략을 따르며, 세 단계로 나뉩니다:

1단계: 불확실성 계산

세 개의 병렬 "위원회 모델"이 배포되며(모두 L2 특징 추출 모델과 동일한 아키텍처를 기반으로 하지만 서로 다른 과거 데이터셋을 기반으로 학습됨):

모델 A: 정형외과 임플란트 모델링 데이터로 학습됨;

모델 B: 장기 재건 데이터를 기반으로 학습;

모델 C: 치과 임플란트 모델링 데이터를 기반으로 학습됨.

각 라벨이 없는 샘플(엔지니어 모델링 데이터)에 대해 위원회는 세 가지 예측 기술 점수를 출력합니다. 표본의 불확실성은 세 점수의 변동 계수(CV)를 통해 계산됩니다:

figure-protocol-21(19)

여기: SA, SB,S C = 세 위원회 모델이 예측한 점수; std (⋅)= 표준편차; figure-protocol-22 = 세 점수의 평균.

CV가 높을수록 위원회 모델 간 불일치가 더 크다는 의미(불확실성이 높음), 표본이 주석에 더 가치가 있음을 의미합니다.

2단계: 샘플 선정

프레임워크는 CV가 가장 높은 상위 10%의 샘플을 선정하여 전문가 주석 인터페이스로 보내 라벨링합니다. 이 능동적 선택 전략은 무작위 선택에 비해 전문가 주석이 필요한 샘플 수를 40-60% 줄여 보정 효율을 향상시킵니다.

3단계: 모델 재교육 및 업데이트

새로 주석이 달린 샘플들은 프레임워크의 알고리즘을 미세 조정하는 데 사용됩니다:

L2 특징 추출 모델의 경우: 주석이 달린 기하학적 오차 데이터를 사용하여 1e-5(초기 학습률의 10%)로 학습률을 재학습하며, 과적합을 방지하기 위해 마지막 두 레이어만 업데이트합니다.

L3 베이지안 점수 엔진의 경우: 각 기술 수준별 가우시안 분포 매개변수(figure-protocol-23)는 주석이 달린 점수 데이터를 사용하여 업데이트되며, 업데이트 공식은 식(20)에 나와 있습니다:

figure-protocol-24(20)

여기서 : figure-protocol-25 = 기술 수준 θi의 업데이트된 평균 값; figure-protocol-26 = 업데이트 전 원래 평균; S-θi = 주석이 달린 표본의 평균 보정 점수로 θi로 표기됨; β = 망각 인수(0.7로 설정, 과거 데이터와 새로운 주석의 균형 맞추).

업데이트된 프레임워크는 재교육 직후 즉시 온라인에 배포되며, 배포 전에 성능 점검이 이루어집니다: 프레임워크의 새로운 출력과 전문가 주석 간 평균 절대 오차가 ≤3(이전 버전 대비 ≥20% 감소)이면 업데이트가 확정됩니다; 그렇지 않으면 추가 주석 표본과 함께 재훈련 과정을 반복합니다.

이 반복적 보정 메커니즘은 건강 응용 3D 모델링 기술이 발전하는 동안에도 프레임워크의 평가 정확도를 90% 이상으로 유지하며 장기적인 적응성을 유지합니다.

액세스가 제한되었습니다. 이 콘텐츠를 보려면 로그인하거나 체험판을 시작하세요.

결과

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

결과는 기술 구별, 구성 타당성, 예측 타당성, 실시간 피드백의 효과에 대한 실험적 평가를 통해 프레임워크의 타당성, 신뢰성, 사용성을 평가합니다.

실험 설계

이 실험들은 12코어 인텔 프로세서, 32GB RAM, 1TB SSD 저장 장치를 탑재한 컴퓨터에서 파이썬 환경에서 수행되었습니다. 데이터 동기화에는 NumPy와 Panda가 사용되었습니다. 특징 추출을 위해 OpenCV와 Scpy라는 라이브러리가 활용되었습니다. CNN-LSTM 모델은 PyTorch로 실행되었습니다. 베이지안 업데이트는 PyMC를 사용했으며, Matplotlib와 Plotly는 실시간 시각 분석을 통해 통제된 다중 모달 데이터 캡처 및 모델 실행 조건을 수행하여 프레임워크의 특징 추출 및 점수 부여 요소를 재현 가능하게 했습니다.

액세스가 제한되었습니다. 이 콘텐츠를 보려면 로그인하거나 체험판을 시작하세요.

토론

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

기존의 3D 모델링 및 상호작용 프레임워크는 수가 적고 몇 차례 유용한 정보를 제공할 수 있지만, 이들은 3D 모델링 작업에서의 공학적 역량을 평가합니다. 대부분의 이전 제스처 추적 및인터페이스 연구는 사용자의 능력 평가보다는 상호작용 행동을 평가합니다. 마찬가지로, VR/햅틱 기반 교육 시스템의경우(20)에서는 학습자가 해부학에 대한 이해를 향상시키지만, 워크플로우의 정확성을 정량화할 수 없으며, 의사결정을 검증할 수는 없습니다. AI 지원 시각화 도구도 마찬가지입니다21. 여기서 제안된 프레임워크는 시선 고정 패턴, 손 운동학, 생리학적 변화, 음성 표지를 활용하여 모델링의 전체 행동 신호를 평가합니다. 베이지안 증거 융합을 적용함으로써 프레임워크는 여러 데이터 스트림에서 관찰 가능한 기술 추정치를 생성합니다. 마지막으로, 역할 인식 시각...

액세스가 제한되었습니다. 이 콘텐츠를 보려면 로그인하거나 체험판을 시작하세요.

공개 사항

Loading...
$$\rightleftharpoonup{xx}$$ $$\longleftharp{xx}$$, $$\longrightharp{xx}$$,

저자들은 공개할 것이 없습니다.

재료

이 논문에 사용된 재료 목록
이름회사카탈로그 번호댓글
AI 지원 3D 모델링 소프트웨어마트리라이즈 NV, 벨기에AI v25.0을 모방합니다AI 분할 및 결함 탐지를 이용한 대퇴줄기 임플란트 모델링 및 간 혈관 재건 작업에 사용됩니다.
아이 트래커 (데스크톱)토비 프로 퓨전TPF-120120Hz 고정 및 강타 데이터를 캡처하여 모델링 중 시각 주의력을 정량화합니다.

재인쇄 및 허가

이 JoVE 논문의 텍스트 또는 그림 재사용 허가 요청

허가 요청

태그

3D

관련 논문