핵심 개념
주목도 맵은 때때로 인간 수행을 향상시킬 수 있지만, 무효과 또는 심지어 비용이 발생하는 경우도 매우 일반적이다. 이러한 효과는 인간 과제, 인공지능 성능, XAI 방법, 이미지, 인간 참여자 및 비교 조건과 관련된 여러 요인에 따라 달라진다.
초록
이 체계적 문헌 고찰은 이미지 분류를 위한 인공지능 설명가능성(XAI) 방법인 주목도 맵이 인간 수행에 미치는 영향을 조사했다. 68개의 사용자 연구를 분석한 결과, 주목도 맵은 때때로 인간 수행을 향상시킬 수 있지만 무효과 또는 비용이 발생하는 경우도 매우 일반적이었다.
이러한 효과를 조절하는 요인을 조사하기 위해, 실험 결과를 인간 과제, 인공지능 성능, XAI 방법, 이미지, 인간 참여자 및 비교 조건과 관련된 요인에 따라 정리했다.
이미지 중심 과제에서는 인공지능 중심 과제에 비해 이점이 덜 일반적이었지만, 구체적인 인지적 요구에 따라 효과가 달라졌다. 또한 이점은 일반적으로 인공지능 중심 과제에서는 잘못된 인공지능 예측에 국한되었지만, 이미지 중심 과제에서는 올바른 예측에 국한되었다. XAI 관련 요인은 놀랍게도 영향이 적었다. 이미지 및 인간 관련 요인에 대한 증거는 제한적이었고, 효과는 비교 조건에 크게 의존했다. 이러한 결과는 향후 사용자 연구 설계에 도움이 될 수 있다.
통계
"주목도 맵은 때때로 인간 수행을 향상시킬 수 있지만, 무효과 또는 심지어 비용이 발생하는 경우도 매우 일반적이다."
"이점은 일반적으로 인공지능 중심 과제에서는 잘못된 인공지능 예측에 국한되었지만, 이미지 중심 과제에서는 올바른 예측에 국한되었다."
"XAI 관련 요인은 놀랍게도 영향이 적었다."
"이미지 및 인간 관련 요인에 대한 증거는 제한적이었고, 효과는 비교 조건에 크게 의존했다."
인용구
"주목도 맵은 때때로 인간 수행을 향상시킬 수 있지만, 무효과 또는 심지어 비용이 발생하는 경우도 매우 일반적이다."
"이점은 일반적으로 인공지능 중심 과제에서는 잘못된 인공지능 예측에 국한되었지만, 이미지 중심 과제에서는 올바른 예측에 국한되었다."
"XAI 관련 요인은 놀랍게도 영향이 적었다."
"이미지 및 인간 관련 요인에 대한 증거는 제한적이었고, 효과는 비교 조건에 크게 의존했다."