로그 보존 용량 계산기

초당 요청 수 × 요청당 줄 수 × 한 줄 크기 × 86,400 입니다. 1,000 rps에 한 줄 500바이트면 하루 8,640만 줄, 약 43GB(10진)가 쌓입니다.

로그는 같은 문자열이 되풀이되는 텍스트라 잘 압축됩니다. gzip으로 보통 80~90%가 줄어들며, JSON 구조화 로그처럼 필드 이름이 매 줄 반복되면 더 잘 줄어듭니다. 실제 로그가 얼마나 줄어드는지는 텍스트 압축률 계산기에 붙여 넣어 재 보면 정확합니다.

Elasticsearch는 기본 설정이 복제본 1개라 같은 데이터를 두 벌 저장합니다. 장애에 대비한 이중화가 그만큼 디스크를 더 쓰기 때문에, 용량을 산정할 때 빠뜨리면 실제의 절반만 잡게 됩니다.

최근 로그만 빠른 저장소에 두고 나머지를 싼 저장소로 내려 보내면 비용이 크게 떨어집니다. 콜드 스토리지는 GB당 단가가 핫의 10분의 1 아래라, 90일 가운데 7일만 핫에 두면 비용이 절반 아래로 내려가는 경우가 흔합니다.

아닙니다. 이 계산은 로그 본문만 셉니다. Elasticsearch 같은 검색 엔진에 넣으면 색인이 본문만큼, 설정에 따라 그보다 더 많은 공간을 차지하므로 따로 잡아야 합니다.