트러블슈팅: 런데이-웰뱅 만보기 연동

문제 상황

현상

• 런데이 만보기 오토스케일링 그룹(ASG) 증설 과정 중 Lambda 호출 건수 0건 기록
• 만보기 데이터가 일부 사용자에게 반영되지 않는 장애 발생
• 초기에는 급격한 트래픽 증가로 인한 서버 과부하 및 응답 지연으로 판단

대응 과정

초동 조치

• 가용성 확보를 위해 인스턴스 긴급 스케일 아웃 (2대 → 4대)
• Lambda 서비스 무중단 재배포 진행

원인 분석

• 스케일 아웃 이후에도 동일 증상이 지속되어 단순 부하 문제가 아님을 판단
• 서버 로그 및 인프라 설정 점검 결과, 신규 인스턴스에 퍼블릭 IP가 할당되지 않아 아웃바운드 통신이 차단된 상태임을 확인
• 해당 문제로 외부 API 호출이 실패하면서 Lambda 트리거 자체가 발생하지 않은 것이 근본 원인으로 파악

조치

• ASG 네트워크 설정 수정 (퍼블릭 IP 자동 할당 활성화)
• 누락된 데이터 1,730건 일괄 복구 완료

결과

• 데이터 수집 정상화 및 서비스 안정성 복구
• 장애 구간 데이터 100% 복구 완료 (1,730건)

장애 방지 대책

인프라 설정 보완

• ASG 인스턴스 생성 시 퍼블릭 IP 자동 할당 설정 적용
• 리소스 최적화 후 인스턴스 수 정상화 (4대 → 2대)

모니터링 고도화

• CloudWatch 알람 기반 이상 감지 시 실시간 메일 알림 체계 구축

자동 복구 시스템 구축

• CloudWatch → SNS → Lambda 연계를 통해 장애 감지 시 자동 재배포 수행하는 복구 프로세스 구현