Data/Data Statistics
2020. 12. 11.
[Outlier Detection] Outlier 탐지를 위한 몇가지 알고리즘
BoxPlot (IQR detection) 제일 간단한 방법으로 Outlier를 정의하는것같다. BoxPlot의 Outlier정의는 다음 그림과 같다. 위아래 직선이 각각 Max Outlier, Min Outlier로 설정하고 그 이상 혹은 이하면 Outlier로 분류한다. Max Outlier = Q3 + IQR * 1.5 Min Outlier = Q1 - IQR * 1.5 의 공식을 따른다. 여기서 각 인자에 대한 설명을 하자면 IQR = Q3 - Q1 = 75% 사분위수 - 25% 사분위수 이다. DBSCAN Machine Learning을 이용한 Outlier 분류이다. 알고리즘 특성상 Outlier에 대한 데이터는 클러스터링 처리를 안해줘서. 클러스터링 결과가 없는건 Outlier로 판단하면된다..