Isolation Forestобнаружение аномалийiForestлинейная временная сложностьподвыборка
Figures from the paper
Abstract (AI)
Большинство существующих модельных подходов к обнаружению аномалий строят профиль нормальных объектов, а затем определяют объекты, не соответствующие этому профилю, как аномалии. В этой статье предлагается принципиально иной модельный метод, который явно изолирует аномалии вместо того, чтобы профилировать нормальные точки. Насколько нам известно, концепция изоляции не исследовалась в современной литературе. Применение изоляции позволяет предложенному методу iForest использовать субдесемплирование (subsampling) в степени, недоступной существующим методам, что приводит к алгоритму с линейной временной сложностью, малым константным множителем и низкими требованиями к памяти. Наша эмпирическая оценка показывает, что iForest демонстрирует благоприятные результаты по сравнению с ORCA (близким к линейному по времени дистанционным методом), LOF и случайными лесами по показателю AUC и времени обработки, особенно на больших наборах данных. iForest также хорошо работает в задачах высокой размерности с большим числом нерелевантных признаков и в ситуациях, когда обучающая выборка не содержит аномалий.
Key Findings
1
Эмпирическая оценка показывает, что iForest по AUC и времени обработки превосходит ORCA, LOF и случайные леса, особенно на больших наборах данных.
2
Представлен метод изоляции (iForest) — новый модельный подход к обнаружению аномалий, который изолирует аномалии вместо профилирования нормальных объектов.
3
iForest эффективно работает в задачах с высокой размерностью и большим числом нерелевантных признаков.
4
iForest активно использует субвыборки, что обеспечивает линейную вычислительную сложность с малой константой и низкими требованиями к памяти.
5
iForest остаётся эффективным даже когда обучающая выборка не содержит аномалий.
Research Object
Алгоритм Isolation Forest (iForest) для обнаружения аномалий
Research Subject
Обнаружение аномалий на основе изоляции: показатели точности (AUC), время обработки, масштабируемость, использование памяти, устойчивость к высоким размерностям и работе при отсутствии аномалий в обучающей выборке
Publication Details
Publication Date
2008-12-01
Journal
Publisher
ISSN
Access Type
Author Information
Download PDF
Subscribe to digest