Методика преобразования данных для повышения эффективности выявления выбросов с помощью критерия Граббса для данных, предположительно соответствующих линейной зависимости
Data Transformation Technique to Improve the Outlier Detection Power of Grubbs’ Test for Data Expected to Follow Linear Relation
2015-01-01
SCID: 54.1/dxq62gmk
Discuss with AI
тест Граббсапреобразование данныхлинейная зависимостьобнаружение выбросоввременные ряды
Figures from the paper
Abstract (AI)
Критерий Граббса (критерий экстремального стандартизованного отклонения, критерий максимального нормированного остатка) используется в различных областях для выявления выбросов в наборе данных, наблюдения которого упорядочены как x₁ ≤ x₂ ≤ x₃ ≤ ⋯ ≤ xₙ (i = 1, 2, 3, …, n). Однако упорядочивание данных устраняет фактическую последовательность временного ряда, которая в некоторых случаях, например при анализе временных рядов, является важным фактором при выявлении выбросов. Поэтому для таких наборов данных критерий Граббса может некорректно выявлять выбросы. В данной статье предлагается методика преобразования данных из линейной формы, связанной с последовательностью, в форму, не связанную с последовательностью (y = c). Применение критерия Граббса к преобразованному набору данных обеспечивает более точное выявление выбросов. Кроме того, новая методика повышает способность критерия Граббса выявлять выбросы. Результаты показывают, что после преобразования критерий Граббса позволял выявлять выбросы при уровне значимости 0,01, тогда как до преобразования он не позволял выявлять их даже при уровне значимости 0,05.
Key Findings
1
Применение теста Граббса после преобразования позволяет точнее выявлять выбросы за счёт устранения зависимости от последовательности.
2
Ранжирование данных для теста Граббса удаляет информацию о последовательности, что может приводить к неправильному выявлению выбросов в данных с линейной зависимостью, включая временные ряды.
3
Предложено преобразование данных из зависящей от последовательности линейной формы в независимую от последовательности постоянную форму (y = c).
4
Преобразование повышает чувствительность теста Граббса: после преобразования выбросы выявлялись при уровне значимости 0,01, тогда как до преобразования они не выявлялись при уровне 0,05.
Research Object
Данные, предположительно подчиняющиеся линейной зависимости, включая последовательностно-связанные данные временных рядов
Research Subject
Повышение способности теста Граббса выявлять выбросы посредством преобразования из последовательностно-связанной линейной формы в последовательностно-независимую постоянную форму
Publication Details
Publication Date
2015-01-01
Journal
Publisher
ISSN
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest