인간은 같은 실수를 반복한다1 [2023.01.30 기록] 나의 첫 서비스 장애 대응 오늘 내가 다니던 회사의 앱에서 서비스 장애가 발생했다. 주식의 매매나 상품의 거래와 같은 중요한 서비스에서 발생한 장애는 아니었지만, 내가 담당하는 서비스였기 때문에 마음이 굉장히 무거웠다. 알고보니 해당 서비스에 사용되는 데이터가 1월 19일 부터 약 11일 동안 적재가 되지 않았다. 앱 화면에서 조회되는 데이터는 매일 새롭게 갱신이 되고, 만약 최신 데이터가 없다면, 최대 10일 전 까지의 과거 데이터를 가져오고 있다. 그런데 내가 데이터가 적재되고 있는지 확인을 하지 못했고, 11일 째 되던 오늘 서비스 장애가 난 것이다. 사고의 원인은 단순했다. 설 연휴 동안 한국거래소가 진행한 '차세대 시장 시스템(Exture 3.0)' 업데이트의 여파로 회사에서 관리하는 테이블의 일부가 새로운 명칭으로 재적.. 2023. 1. 30. 이전 1 다음 반응형
