사용자가 시계열 데이터 분석 프로젝트에서 데이터 누락, 유출, 시계열 손상 문제를 겪은 경험을 공유했어요.
데이터 누락률 3%로 보고된 프로파일링 도구의 오류를 발견하고, 실제로는 6일치 데이터가 누락된 것을 확인했어요.
이러한 문제를 해결하기 위해 시계열 데이터의 연속성 오류, 데이터 유출, 급격한 이상치를 감지하는 오픈 소스 도구 'TSAuditor'를 개발했어요.
TSAuditor는 PyPI에서 사용할 수 있으며, 표준 프로파일링 도구와 비교한 예제 노트북도 제공돼 데이터 분석 과정을 간소화하고 맞춤형 스크립트 작성 부담을 줄여줘요.