Единый подход к интерпретации предсказаний моделей

A Unified Approach to Interpreting Model Predictions
Scott Lundberg, Su‐In Lee
2017-05-22

SHAPаддитивные объяснения Шеплиаддитивная атрибуция признаковважность признаковинтерпретируемость моделей
Во многих приложениях понимание причин, по которым модель делает определённое предсказание, может быть столь же важным, как и точность самого предсказания. Однако наивысшая точность на больших современных наборах данных часто достигается с помощью сложных моделей, интерпретация которых затруднительна даже для экспертов, например ансамблевых моделей или моделей глубокого обучения, что создаёт противоречие между точностью и интерпретируемостью. В связи с этим в последнее время были предложены различные методы, помогающие пользователям интерпретировать предсказания сложных моделей, однако зачастую неясно, как эти методы связаны между собой и в каких случаях один метод предпочтительнее другого. Для решения этой проблемы мы представляем единую платформу интерпретации предсказаний — SHAP (SHapley Additive exPlanations, аддитивные объяснения Шепли). SHAP присваивает каждому признаку значение важности для конкретного предсказания. К её новым компонентам относятся: (1) выявление нового класса аддитивных мер важности признаков и (2) теоретические результаты, показывающие существование единственного решения в этом классе, обладающего набором желательных свойств. Новый класс объединяет шесть существующих методов; это особенно примечательно, поскольку некоторые недавно разработанные методы, относящиеся к этому классу, не обладают предложенными желательными свойствами. Основываясь на выводах, полученных в результате этого объединения, мы представляем новые методы, демонстрирующие более высокую вычислительную эффективность и/или лучшее соответствие человеческой интуиции по сравнению с ранее предложенными подходами.
1
На основе объединения разработаны новые методы с улучшенной вычислительной эффективностью и/или большей согласованностью с человеческой интуицией.
2
SHAP предлагает унифицированную систему интерпретации отдельных предсказаний, присваивая каждому признаку значение важности.
3
В рамках этой системы выделен новый класс аддитивных мер важности признаков для объяснения предсказаний моделей.
4
Эта система объединяет шесть существующих методов интерпретации предсказаний, некоторые из которых не обладают предложенными желательными свойствами.
5
Теоретически показано, что SHAP является единственным решением в этом классе, удовлетворяющим заданному набору желательных свойств.

Предсказания сложных моделей машинного обучения

Атрибуция важности признаков для отдельных предсказаний, включая унификацию, аксиоматическую характеристику и вычислительное усовершенствование аддитивных методов объяснения

Publication Details
Publication Date
2017-05-22
Journal
Publisher
ISSN
Access Type
Author Information
Authors
Scott Lundberg
Su‐In Lee
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%