## shapiro , normaltest shapiro가 노말 분포 검정할 때 가장 엄격하게 한다고 함. from scipy.stats import shapiro , normaltest , anderson , kstest normal = [] notnormal = [] for var in num_var : stat, p = shapiro(train[var].dropna().values) stat, p = normaltest(train[var].dropna().values) alpha = 0.05 if p > alpha : normal.append(var) else : notnormal.append(var) ## kstest 분포 2개를 비교하는 것이므로, 어떤 분포에서도 사용 가능하므로, 노말에서도 사..

우연히 유튜브에서 추천해준 2018 Detecting Anomalies Using Statistical Distances 이 내가 관심이 있는 Anomaly detection과 Statistica Distance라서 듣게 되었고, 좋은 것을 많이 얻어서 공유합니다. 그렇다면 Quantile로 하면 되지 않느냐? 이렇게 간단한 통계량 값만 이용해서는 충분하지 못하다. 그러므로 이런 통계량 값들을 결합해서 사용하거나, 통계적 거리를 사용해야 한다. Statistical Distance Kolmogorov-Smirnov Distance 하지만 약간 기존 family가 아닌 쌍봉 같은 경우가 나오는 경우 KS로 거리를 재게 되면, 다음과 같은 문제가 생긴다. 멀리 떨어져있어도 거의 같은 값으로 표현이 된다. 그..