카오스 엔지니어링(Chaos Engineering)은 프로덕션 시스템에 의도적으로 장애를 주입하여 시스템의 취약점을 사전에 발견하고 회복탄력성(Resilience)을 강화하는 실험적 방법론입니다. Netflix의 Simian Army에서 시작되어 현재 SRE의 핵심 실천으로 자리 잡았습니다.
| 도구 | 역할 |
|---|---|
| Chaos Monkey | 랜덤하게 인스턴스(서버) 종료 — 단일 서버 장애 복구 검증 |
| Chaos Gorilla | AWS 가용 영역(AZ) 전체 장애 시뮬레이션 |
| Chaos Kong | AWS 리전 전체 장애 시뮬레이션 |
| Latency Monkey | 서비스 간 인위적 지연 주입 — 타임아웃·서킷 브레이커 검증 |
| Conformity Monkey | 모범 사례 미준수 인스턴스 탐지·종료 |
| Security Monkey | 보안 정책 위반 인스턴스 탐지 |
| 범주 | 예시 | 검증 대상 |
|---|---|---|
| 인프라 장애 | 서버 강제 종료, 디스크 꽉 참, OOM | 자동 복구·헬스 체크 |
| 네트워크 장애 | 패킷 손실, 지연 주입, 파티션 분리 | 서킷 브레이커·재시도 정책 |
| 의존성 장애 | 외부 API 타임아웃, DB 연결 끊김 | 폴백·Graceful Degradation |
| 자원 고갈 | CPU/메모리 스트레스, 스레드 고갈 | 오토스케일링·쓰로틀링 |
| 상태 장애 | 데이터 부패, 캐시 무효화 | 데이터 일관성·복구 |
| 패턴 | 설명 | 구현 |
|---|---|---|
| 서킷 브레이커 | 반복 실패 시 빠른 실패로 전환 | Resilience4j, Hystrix |
| 재시도(Retry) | 지수 백오프 + Jitter로 재시도 | Polly, AWS SDK 내장 |
| 타임아웃 | 무한 대기 방지, 적절한 타임아웃 설정 | 서비스 SLO 기반 설정 |
| Bulkhead | 스레드풀·리소스를 격리하여 장애 전파 방지 | 스레드풀 분리, K8s ResourceQuota |
| Graceful Degradation | 핵심 기능 유지, 비핵심 기능만 비활성화 | Feature Flag, 캐시 폴백 |
| 도구 | 특징 | 대상 환경 |
|---|---|---|
| Gremlin | SaaS형, GUI 기반, 엔터프라이즈 기능 | 온프레미스·클라우드·K8s |
| LitmusChaos | CNCF 프로젝트, K8s 네이티브 | Kubernetes 중심 |
| ChaosBlade | Alibaba 오픈소스, 다양한 장애 유형 | K8s·JVM·OS·네트워크 |
| AWS FIS | AWS Fault Injection Simulator, 네이티브 통합 | AWS 서비스 전용 |
AI 감시 소프트웨어가 재택근무 시대를 끝내고 있다. 직원의 키스트로크·화면·표정까지 추적하는 기술의 실체와, 한국 직장인이 알아야…
정보보안기사 실기는 개념을 아는 것보다 로그를 읽고, 규칙을 쓰고, 계산하는 힘에서 점수가 갈립니다. 이번 글은…
호르무즈 해협 뉴스는 이제 '또 공격이 있었다'보다 '얼마나 늘었나'를 봐야 합니다. 이투데이가 FT와 영국해사무역기구(UKMTO) 등을…
이번 추석 연휴, 은행들은 쉬지 못했습니다. 연휴 기간 금융권에서 대규모 개인정보 유출 사고가 터졌기 때문입니다.…
"집 못 팔게 막으면 값이 내려가겠지." 서울 전역이 토지거래허가구역으로 묶이던 1년 전, 이런 기대가 있었습니다.…
다섯 거래일 연속 밀린 코스피가 오늘 아침 크게 반등했습니다. 오전 9시 12분 기준 6,165.02로 전…