SpotLake 주요 이벤트 정리

[chris0765]

목표

추후 데이터 분석 중 특이한 패턴이 발견될 경우, 해당 원인을 파악하기 용이하게끔 하기 위한 이슈입니다.
기존에는 여러 이벤트들이 다양한 이슈에 분산되어 있었기에, 이벤트들을 찾는 과정이 복잡했습니다.

• 2021/11/24
  [kmubigdata] kmubigdata 계정의 spotrank-timestream에서 Collect 시작 시점

• 2022/04/14 06:00:00 ~ 2022/04/28 08:40:00
  [kmubigdata] SpotPrice 수집 모듈 추가 후 에러가 발생하여 수집이 중단된 기간

• 2022/04/29
  [kmubigdata] AZ별 SpotPrice 수집으로 인해Changed-Row의 수가 증가한 시점

• 2022/07/15
  [kmubigdata] Workload 누락 현상 수정 후 수집 시작 시점

• 2022/08/05 05:20:00
  [kmubigdata] Ondemand Price 수집을 시작한 시점

• 2022/08/23
  [spotrank] 1차 migration 완료 시점

[hyu-leeky]

오케이. 잘 정리했다. 확실히 파악에 도움이 되겠다.

[james-sungjae-lee]

이후에 발생하는 SpotLake 서비스 장애, 데이터 유실, 그 외 분석에 영향을 줄 수 있는 이벤트에 대해서도 계속해서 이슈에 남길 예정입니다.

[chris0765]

• 2022/08/23 07:50:00
  [spotrank] Collector 가동

[chris0765]

• 2022/08/24 00:00:00
  [spotrank] Collector credentials 파일명 오류로 데이터 수집 중단된 시점

[chris0765]

• 2022/08/25 00:00:00
  [spotrank] Collector 모듈 재가동

[hyu-leeky]

이관은 잘 마무리 된듯 하니 close.

[chris0765]

• 2022/09/28 16:20:00 ~ 2022/09/29 03:00:00
  AWS Collector Instance 다운으로 인한 데이터 손실

[chris0765]

• 2022/09/30 00:00:00 ~ 2022/09/30 02:50:00
  Collector 복원시 급하게 사용한 Credentials로 인한 24시간 제한으로 수집이 이루어지지 않음

[chris0765]

• 2022/10/28 04:20 ~ 2022/10/31 09:00:00
  Credentials 변경으로 인한 데이터 손실

[chris0765]

• 2023/01/06 00:00:00 ~ 2022/01/06 00:10:00
  credentials 변경으로 인한 데이터 손실