최근 발생한 수술 중 사건으로 인해 중대 환경에서 증강 현실(AR)의 신뢰성이 의문시되고 있습니다. AR 오버레이(중첩) 안내에 따라 진행된 수술 중, 외과의사가 잘못된 절개를 했습니다. 수술실의 3D 재구성(Unity 3D의 디지털 트윈)과 Vuforia Engine 로그 분석 결과, 원인은 천장 LED 조명이 광학 추적 마커에 간섭을 일으켜 발생한 3mm의 오차로 밝혀졌습니다.
기술 분석: 광학 간섭 및 시스템 보정 오류 🩺
이 오류는 무작위적인 것이 아니라 체계적인 공간 등록 실패였습니다. 수술용 LED 조명은 사람의 눈에는 보이지 않는 고주파 스펙트럼과 깜박임(플리커)을 가지고 있어 RealityCapture의 광학 센서 필터를 포화시켰습니다. Vuforia Engine은 반사 마커를 해석하는 과정에서 LED의 섬광을 기준점으로 혼동하여 3D 메시를 이동시켰습니다. 그 결과 Z축에서 3mm의 드리프트(이탈)가 발생했고, 이는 가상 가이드가 잘못된 경로를 지시하기에 충분한 정도였습니다. 디지털 트윈은 이 이벤트를 변환 행렬의 노이즈 급증으로 기록했지만, 동적 허용 오차 임계값이 부족하여 시스템이 중복 안전 장치를 활성화하지 못했습니다.
열악한 환경에서의 AR 설계를 위한 교훈 🔧
이 사례는 정적 보정만으로는 충분하지 않음을 보여줍니다. 수술실의 경우, 중복 센서 아키텍처가 필요합니다. 즉, 광학 추적을 관성 측정 장치(IMU) 및 특정 LED 주파수를 차단하는 대역 통과 필터와 결합해야 합니다. 또한, 동적 보정은 1mm를 초과하는 등록 이상 징후를 감지하여 실시간으로 오버레이를 재조정해야 합니다. 교훈은 분명합니다. 수술용 AR에서 환경 소음으로 인해 잃어버린 1mm는 성공과 치명적인 오류의 차이를 만들 수 있습니다.
수술실 LED 조명의 깜박임 주파수 변화가 AR의 시각적 위치 추적 시스템에 간섭을 일으키는 것일까요, 아니면 문제가 순전히 추적 헤드의 기계적 보정에만 있는 것일까요?
(참고: 유지보수에 적용된 AR을 사용하면 기계가 폭발하기 전에 고장 위치를 확인할 수 있습니다.)