[Infra Ops] CPU/메모리/디스크 임계치 관리와 logrotate

# 현재 CPU 사용률 확인
top -bn1 | grep "Cpu(s)" | awk '{print $2}' | cut -d. -f1

# 5분 평균 부하 확인 (1분/5분/15분 로드 에버리지)
uptime
# 예시: load average: 0.52, 1.20, 0.98
# load average가 CPU 코어 수를 초과하면 포화 상태
nproc   # 코어 수 확인

# 사용 가능 메모리 확인
free -m
# available 컬럼이 핵심 — cached/buffers 제외한 실제 가용 메모리

# 메모리 상위 프로세스 5개
ps aux --sort=-%mem | head -6

# 파일시스템별 사용률
df -h

# inode 사용률 (파일 수 한도)
df -i

# 디렉터리별 용량 (내림차순 상위 10개)
du -sh /var/log/* 2>/dev/null | sort -rh | head -10

# /etc/logrotate.d/nginx 예시

/var/log/nginx/*.log {
    daily           # 매일 로테이션
    rotate 30       # 30개 보관 (30일치)
    compress        # 로테이션된 파일 gzip 압축
    delaycompress   # 가장 최근 로테이션 파일은 다음 사이클에 압축 (Nginx가 아직 열고 있을 수 있으므로)
    missingok       # 로그 파일이 없어도 에러 내지 않음
    notifempty      # 빈 파일은 로테이션 건너뜀
    sharedscripts   # postrotate를 glob 대상 전체에 한 번만 실행
    postrotate
        nginx -s reopen   # Nginx에 새 로그 파일로 전환하도록 신호
    endscript
}

# 설정 검증 (실제 로테이션 없이 시뮬레이션)
logrotate -d /etc/logrotate.d/nginx

# 강제 로테이션 (테스트 목적)
logrotate -f /etc/logrotate.d/nginx

# logrotate 상태 확인 (마지막 실행 시각 등)
cat /var/lib/logrotate/status | grep nginx

# JVM Heap/GC 통계 확인 (1초 간격, 5회)
jstat -gcutil <PID> 1000 5

# 출력 예시:
#   S0     S1     E      O      M     CCS    YGC     YGCT    FGC    FGCT     GCT
#   0.00  85.23  72.45  61.20  97.43  94.23     42    2.840     3    1.230    4.070

# PID 확인
pgrep -a java
# 또는
ps aux | grep java

# Heap 덤프 수집 (메모리 누수 분석용)
jmap -dump:format=b,file=/tmp/heap.hprof <PID>
# 이후 Eclipse MAT 또는 JVisualVM으로 분석

# /var/log 아래 대용량 파일 상위 10개
du -sh /var/log/* 2>/dev/null | sort -rh | head -10

# 특정 디렉터리 세부 확인
du -sh /opt/tomcat/logs/* | sort -rh | head -10

# 현재 열려있는 상태로 계속 써지는 파일 확인 (lsof)
lsof | grep -i "log" | awk '{print $9, $7}' | sort -k2 -rn | head -10

# 파일을 삭제하지 않고 비우기 (프로세스가 파일을 열고 있을 때 안전)
> /opt/tomcat/logs/catalina.out
# 또는
truncate -s 0 /opt/tomcat/logs/catalina.out

# 로그 레벨 확인 (Logback/Log4j 기준)
grep -r "level" /opt/tomcat/conf/logging.properties

# 애플리케이션 로그 레벨 임시 변경 (재시작 없이)
# Spring Boot Actuator가 활성화된 경우
curl -X POST http://localhost:8080/actuator/loggers/ROOT \
  -H "Content-Type: application/json" \
  -d '{"configuredLevel": "WARN"}'