마이크로소프트의 의료용 비전 언어 모델 공개

주장마이크로소프트 리서치는 흉부 엑스레이 해석의 복잡한 요구사항을 해결하기 위해 케어엑스라는 통합 비전 언어 모델을 개발했습니다.

팩트케어엑스는 시그립투에스오사백엠 비전 인코더와 파이포미니인스트럭트 언어 모델을 기반으로 구축되었습니다. 이 모델은 경량 어댑터를 통해 연결되며, 분류 및 시각적 접지 작업을 위한 보조 헤드를 포함하고 있습니다.

팩트기존 생성형 모델은 임상적 중요도와 상관없이 모든 토큰 오류를 동일하게 처리하는 한계가 있었습니다. 케어엑스는 디에이피오 강화 학습을 도입하여 임상적 정확성과 공간적 접지 품질에 대해 보상을 제공함으로써 이 문제를 해결합니다.

팩트케어엑스는 흉부 엑스레이 해석 시 심장 비대와 같은 정밀 측정이 필요한 경우를 위해 도구 기반 추론을 지원합니다. 이 모델은 시각적 근사치에만 의존하지 않고 실제 측정값을 계산하여 진단의 정확성을 높입니다.

주장임상적으로 유용한 인공지능 시스템은 다양한 작업 환경에 적응하고 의학적으로 정확한 결과를 출력해야 합니다. 케어엑스는 생성형 기능과 판별형 기능을 결합하여 보고서 작성부터 이상 부위 식별까지 폭넓은 업무 흐름을 지원합니다.

팩트보조 헤드를 통한 구조적 예측은 생성 성능을 향상시킵니다. 체스트 이마지놈 데이터셋에서 해부학적 접지 성능이 엠에이피 기준 28.2 퍼센트 포인트 향상되었으며, 패드체스트 데이터셋에서는 엠에이피가 24.6 퍼센트 포인트 증가했습니다.

팩트디에이피오 학습을 거친 케어엑스의 생성형 출력은 전용 탐지 헤드의 성능을 상회하거나 대등한 수준에 도달했습니다. 해부학적 접지 작업에서 케어엑스는 0.868 엠에이피를 기록하여 기존 에스에프티 탐지 헤드의 0.865 엠에이피를 넘어섭니다.

교차검증현재의 생성형 비전 언어 모델은 진단 결정에 대한 보정된 신뢰도 점수를 제공하지 못하는 문제가 있습니다. 케어엑스는 이중 추론 방식을 통해 자유 텍스트 응답과 함께 신뢰도 점수가 포함된 구조적 예측을 동시에 제공합니다.

교차검증이 모델은 연구용으로 개발된 프로토타입이며 마이크로소프트의 공식 제품이나 의료 기기가 아닙니다. 규제 당국의 승인을 받지 않았으므로 임상 진단이나 환자 치료에 직접 사용하는 것은 금지되어 있습니다.

출처마이크로소프트 리서치 블로그의 공식 발표 자료를 교차 검증했습니다. 추가적인 연구 결과와 기술적 세부 사항은 해당 웹사이트에서 확인할 수 있습니다.