Timestamp를 Rolling Aggregation하는 방법은 생각보다 쉽습니다. 데이터를 다루다보면 필연적으로 Group-by Operation을 자주 접하게 됩니다. 일반적인 Group-by Operation들은 단순합니다. 그룹마다 평균을 구한다거나 중앙값을 구하거나 최댓값, 최솟값을 구합니다. 하지만 타임스탬프가 존재하고 그룹마다...

ML 실험을 보다 빠르고 보기 좋게 관리해봅시다. ML은 기본적으로 많은 실험을 거쳐서 최적의 모델을 찾아 이를 배포하고 제품화합니다. 수많은 Feature, 알고리즘, Hyper-parameter의 구성을 다양하게 시도하여 모델을 튜닝하게 됩니다. 하지만 Feature가 많아지고 알고리즘이 복잡해질 수록 최적의 모델을 찾기란 쉽지 않습니다...

Python으로 print()로 로깅하는 것보다 멋진 방법이 있습니다. 파이썬 공식 문서에서 설명하는 로깅은 다음과 같습니다. 로깅은 어떤 소프트웨어가 실행될 때 발생하는 이벤트를 추적하는 수단입니다. 소프트웨어 개발자는 코드에 로깅 호출을 추가하여 특정 이벤트가 발생했음을 나타냅니다. 이벤트는 선택적으로 가변 데이터 (즉, 이벤트 ...

Ray를 이용한 Python 병렬 처리 방법을 알아보도록 하겠습니다. 😄 우리는 제법 큰 데이터에 대한 작업을 자주 합니다. 그게 Cosine Similarity를 구하는 것이든, Correlation을 구하는 것이든 말이죠. 처음에 코드를 짜고 결과가 잘 나오기만 하면 우선은 다행입니다. 결과를 확인하여 문제가 없다면 ‘이걸 더 빠르게 만...

A/B 테스트는 훌륭한 검정 방법이지만 올바르게 쓰지 않으면 아무런 의미가 없습니다. A/B 테스트는 훌륭한 도구지만 모든 아이디어를 테스트할 순 없음 테스트 비용이 높거나, Early phase에 있는 회사들은 리소스에 제약이 있기 때문 샘플 인터뷰 질문 E-커머스 ...