Методика преобразования данных для повышения эффективности выявления выбросов с помощью критерия Граббса для данных, предположительно соответствующих линейной зависимости

Data Transformation Technique to Improve the Outlier Detection Power of Grubbs’ Test for Data Expected to Follow Linear Relation
K. K. L. B. Adikaram, M. A. Hussein, Mathias Effenberger, Thomas Becker
2015-01-01

тест Граббсапреобразование данныхлинейная зависимостьобнаружение выбросоввременные ряды
Критерий Граббса (критерий экстремального стандартизованного отклонения, критерий максимального нормированного остатка) используется в различных областях для выявления выбросов в наборе данных, наблюдения которого упорядочены как x₁ ≤ x₂ ≤ x₃ ≤ ⋯ ≤ xₙ (i = 1, 2, 3, …, n). Однако упорядочивание данных устраняет фактическую последовательность временного ряда, которая в некоторых случаях, например при анализе временных рядов, является важным фактором при выявлении выбросов. Поэтому для таких наборов данных критерий Граббса может некорректно выявлять выбросы. В данной статье предлагается методика преобразования данных из линейной формы, связанной с последовательностью, в форму, не связанную с последовательностью (y = c). Применение критерия Граббса к преобразованному набору данных обеспечивает более точное выявление выбросов. Кроме того, новая методика повышает способность критерия Граббса выявлять выбросы. Результаты показывают, что после преобразования критерий Граббса позволял выявлять выбросы при уровне значимости 0,01, тогда как до преобразования он не позволял выявлять их даже при уровне значимости 0,05.
1
Применение теста Граббса после преобразования позволяет точнее выявлять выбросы за счёт устранения зависимости от последовательности.
2
Ранжирование данных для теста Граббса удаляет информацию о последовательности, что может приводить к неправильному выявлению выбросов в данных с линейной зависимостью, включая временные ряды.
3
Предложено преобразование данных из зависящей от последовательности линейной формы в независимую от последовательности постоянную форму (y = c).
4
Преобразование повышает чувствительность теста Граббса: после преобразования выбросы выявлялись при уровне значимости 0,01, тогда как до преобразования они не выявлялись при уровне 0,05.

Данные, предположительно подчиняющиеся линейной зависимости, включая последовательностно-связанные данные временных рядов

Повышение способности теста Граббса выявлять выбросы посредством преобразования из последовательностно-связанной линейной формы в последовательностно-независимую постоянную форму

Publication Details
Publication Date
2015-01-01
Journal
Publisher
ISSN
Access Type
Author Information
Authors
K. K. L. B. Adikaram
M. A. Hussein
Mathias Effenberger
Thomas Becker
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat
Make a presentation
100%