핵심 개념
본 연구는 전체 슬라이드 이미지 분석을 위해 동적 인스턴스 샘플링, 특징 표현, 의사 결정 간의 상호작용을 탐구하고 이를 통합한 동적 정책 기반 적응형 다중 인스턴스 학습 프레임워크를 제안한다.
초록
본 연구는 전체 슬라이드 이미지(WSI) 분석을 위한 동적 정책 기반 적응형 다중 인스턴스 학습(PAMIL) 프레임워크를 제안한다. PAMIL은 인스턴스 샘플링, 특징 표현, 의사 결정 간의 상호작용을 탐구하여 이를 통합한다.
인스턴스 샘플링 부분에서는 동적 정책 기반 인스턴스 선택(DPIS) 방식을 도입하여 현재 인스턴스와 과거 인스턴스 간의 관계를 고려한다. 이를 통해 가장 정보적인 인스턴스를 선택할 수 있다.
특징 표현 부분에서는 선택 융합 특징 표현(SFFR) 방식을 제안하여 현재 인스턴스와 과거 인스턴스의 정보를 융합한다. 이를 통해 보다 강건하고 구체적인 토큰 표현을 생성할 수 있다.
의사 결정 부분에서는 보상 및 처벌 메커니즘을 도입하여 DPIS가 레이블 관련 및 강건한 인스턴스를 선택하도록 유도한다.
실험 결과, 제안한 PAMIL 프레임워크가 기존 최신 기법들을 CAMELYON16 데이터셋에서 3.8%, TCGA 폐암 데이터셋에서 4.4% 향상시켰음을 보여준다. 이는 인스턴스 샘플링, 특징 표현, 의사 결정 간의 상호작용을 효과적으로 활용할 수 있음을 입증한다.
통계
전체 슬라이드 이미지(WSI)는 수천 개의 인스턴스(패치)로 구성되어 있다.
각 WSI는 양성 또는 음성 레이블로 표시되지만, 개별 인스턴스는 레이블이 없다.
다중 인스턴스 학습(MIL) 기법은 모든 인스턴스의 정보를 활용하여 가방 수준의 예측을 제공한다.
인용구
"기존 MIL 기반 기술은 다음과 같은 문제점을 겪고 있다: 1) 수많은 인스턴스에 대한 높은 저장 공간과 집중적인 전처리가 필요(샘플링); 2) 제한된 지식으로 인한 과적합 위험(특징 표현); 3) 의사 가방 수와 사전 편향이 모델 강건성과 일반화에 영향을 미침(의사 결정)."
"과거 샘플링 인스턴스를 활용하면 최종 WSI 분석을 촉진할 수 있지만, 이는 이전 기술에서 거의 탐구되지 않았다."