대용량 로그 스토리지 아키텍처: 비용-성능 균형 설계 가이드 AI 생성 이미지: 대용량 로그 스토리지 아키텍처 비용-성능 균형 문제 정의 및 요구사항 — 비용·성능·운영 목표 정리 로그 볼륨: 초당 5k–50k 이벤트(평균 20k EPS). 일일 생성량은 1.7–8.6TB(평균 3.5TB). 보존기간: 핫 레이어 7일, 웜/콜드 365일. 규정이 있는 경우 아카이브는 최대 7년까지 별도 보관. 검색·집계 SLO: 핫 데이터의 95번째 백분위 응답시간 <2s(단일 쿼리). 복합 배치 집계(일간)는 30분 이내 완료. 운영 요건: 인제스트 가용성(RPO) <1분, 장애 복구(RTO) <1시간. 24/7 온콜 대응과 신속한 롤백 절차를 포함. 규정 준수: 전송·저장 시 암호화 적용, 데이터 레지던시 준수, 보관·삭제에 대한 감사 로그 확보. 변경 불변성(immutable retention) 요구 항목은 명확히 표기. 비용 제약: 스토리지 예산은 월 $1k–$5k 범위를 목표로 하거나 GB당 저장비용을 $0.02–$0.05 이내로 제한. 인제스트·쿼리 요금과 운영 인건비를 포함해 총비용을 고려. 설계 목표 요약: 핫/콜드/아카이브 계층화와 효율적 압축, 적절한 인덱싱 및 수명주기 정책으로 SLO를 만족시키며 총소유비용(TCO)을 최적화. 대용량 로그 스토리지 아키텍처 비용-성능 균형을 염두에 둔다. 체크리스트: 핵심 쿼리 식별 → 핫 데이터 크기 산정 → 압축·인덱스·보존 정책 자동화. 로그 워크로드 분석 — 쓰기·읽기·쿼리 패턴 분류 로그 워크로드는 초당 쓰기량(WPS), 동시 쿼리 수, 핫·콜드 비율, 평균과 피크 특성으로 정량화합니다. 수집할 핵심 지표 예: WPS(저: <1k, 중: 1k–10k, 고: >10k), 동시 쿼리(저: <50, 중: 50–500, 고: >500), 핫 파티션 비중, 평균/피크 비율(지속형 vs 폭발형). 이 분류는 대용량 로그 스토리지 아...