수술실에서 의료진과 협력하는 지능형 수술로봇 개발에 한 걸음 더 다가갈 인공지능(AI) 기술이 나왔다. 수술 도구나 개별 동작을 식별하는 수준을 넘어 수술이 현재 어떤 단계에 있으며, 의료진이 무엇을 수행하는지 맥락까지 파악하는 기술이다.
삼성서울병원 지능형의료로봇연구센터 정규환 센터장·전용준 연구원과 이식외과 오남기 교수 연구팀은 수술 영상의 공간적 정보와 시간적 흐름을 통합 분석하는 AI 모델 'CurConMix+(커콘믹스플러스)'를 개발했다고 밝혔다.
이번 기술은 수술 장면을 개별 이미지로 인식하는 기존 AI의 한계를 넘어 수술 동작부터 세부 과업, 전체 수술 단계까지 계층적으로 이해하도록 설계됐다. 연구 결과는 국제 학술지 'IEEE Transactions on Medical Imaging'에 게재됐다.
기존 수술영상 AI는 특정 장면에서 수술 도구와 동작을 찾아내는 데 주력했다. 하지만 실제 수술은 여러 동작이 연속적으로 이어지고, 수술 단계에 따라 의료진의 행동과 필요한 도구도 달라진다. 수술로봇이 의료진을 능동적으로 보조하려면 개별 동작뿐 아니라 전체 수술 흐름을 파악하는 능력이 필요하다.
연구팀은 CurConMix+가 영상의 공간적 특징과 시간에 따른 변화를 함께 분석하도록 해 이러한 맥락 인식 능력을 높였다고 설명했다.
성능 평가에서도 기존 모델을 앞섰다. 전 세계 연구자들이 활용하는 공개 수술영상 벤치마크인 'CholecT45'를 기반으로 시험한 결과, CurConMix+의 평균 정밀도(AP_IVT)는 42.2%로 기존 최고 성능 모델의 41.5%보다 높았다.
특히 간 절제술 영상에서는 58.4%를 기록해 기존 모델보다 10%포인트 이상 향상됐다. 수치가 높을수록 AI가 수술 영상 속 도구와 동작, 대상 등을 정확하게 인식한다는 의미다.
학습 데이터에서 상대적으로 적게 등장하는 희귀 수술 동작의 인식 성능도 개선됐다. 담낭 절제술에서 담즙 유출을 막기 위해 클립을 적용하는 과정 등 드물게 나타나는 동작의 평균 정밀도는 33%에서 39%로 높아졌다. 간 수술 영상에서는 43%에서 56%로 향상됐다.
연구팀은 간 절제술 영상 분석을 위한 데이터셋 'LLS48'도 구축했다. 2020년 2월부터 2022년 3월까지 삼성서울병원에서 시행된 복강경 간 절제술 48건, 약 52시간 분량의 영상을 바탕으로 제작했다.
국제 수술영상 표준 분류에 따라 5개 수술 단계와 18개 세부 과업, 195개 동작으로 구분했다. 간담췌외과 전문의 2명과 10년 이상 경력의 전문 인력 3명이 영상 장면별로 분류하고 검증했다.
그동안 수술 AI 연구가 담낭 절제술에 상대적으로 집중됐던 것과 달리 간 수술로 연구 범위를 확장했다는 점도 특징이다. 데이터셋과 코드는 깃허브에 공개해 다른 연구자들도 활용하고 검증할 수 있도록 했다.
연구팀은 세부 수술 동작을 학습한 AI가 상위 수준의 수술 단계까지 예측할 수 있는지도 평가했다. 그 결과 담낭 절제술의 수술 단계 예측에서 93% 이상의 정확도를 기록했다. 개별 동작 인식에서 나아가 수술 과정의 계층적 구조까지 학습할 수 있음을 보여준 결과다.
정규환 센터장은 "수술로봇이 의료진과 자연스럽게 협력하려면 단순히 수술 도구나 장기를 식별하는 것을 넘어 현재 어떤 수술이 진행되고 있고 의료진이 무엇을 하는지 이해할 수 있어야 한다"며 "이번 연구는 개별 수술 동작부터 전체 수술 흐름까지 통합적으로 인식하는 AI 기술을 제시했다는 데 의미가 있다"고 말했다.
오남기 교수는 "손끝 동작을 배운 AI가 수술 전체의 흐름까지 읽어낸 셈"이라며 "수술 과정 자동 기록과 수술 복기, 전공의 교육을 거쳐 궁극적으로는 수술 중 상황을 실시간으로 인지하는 휴머노이드 수술보조로봇에도 활용할 수 있을 것"이라고 전망했다.
Copyright @보건신문 All rights reserved.