Sar on Joonlog

Ansible Playbook으로 CMD 로그 / logrotate / openfile / SAR 설정하기

Wed, 05 Nov 2025 09:00:00 +0900

Redhat 계열 리눅스에서 Ansible로 시스템 로그 및 openfile, sar 설정 자동화

환경

Rocky 8.10

Ansible 설정

01. CMD 로그 설정

cmdlog_rogrotate_openfile.yaml

 1
 2
 3
 4
 5
 6
 7
 8
 9
 10
 11
 12
 13
 14
 15
 16
 17
 18
 19
 20
 21
 22
 23
 24
 25
 26
 27
 28
 29
 30
 31
 32
 33
 34
 35
 36
 37
 38
 39
 40
 41
 42
 43
 44
 45
 46
 47
 48
 49
 50
 51
 52
 53
 54
 55
 56
 57
 58
 59
 60
 61
 62
 63
 64
 65
 66
 67
 68
 69
 70
 71
 72
 73
 74
 75
 76
 77
 78
 79
 80
 81
 82
 83
 84
 85
 86
 87
 88
 89
 90
 91
 92
 93
 94
 95
 96
 97
 98
 99
100
101
102
103
104
105


---
- name: Configure cmd logging, logrotate, and open files on Rocky 8.10
 hosts: prod
 become: true

 handlers:
 - name: restart rsyslog
 ansible.builtin.systemd:
 name: rsyslog
 state: restarted
 enabled: true

 tasks:
 - name: 01. Ensure directories exist
 ansible.builtin.file:
 path: "{{ item }}"
 state: directory
 mode: '0755'
 loop:
 - /home/ncloud24/scripts
 - /var/log/backup

 - name: 02. Deploy logMoveDelete.sh
 ansible.builtin.copy:
 src: files/logMoveDelete.sh
 dest: /home/ncloud24/scripts/logMoveDelete.sh
 owner: root
 group: root
 mode: '0700'

 - name: 03. Register daily cron for logMoveDelete.sh (01:00)
 ansible.builtin.cron:
 name: "Move and cleanup .tar.gz logs"
 user: root
 minute: "0"
 hour: "1"
 job: "/home/ncloud24/scripts/logMoveDelete.sh"

 - name: 04. Deploy /etc/logrotate.conf (backup original)
 ansible.builtin.copy:
 src: files/logrotate.conf
 dest: /etc/logrotate.conf
 owner: root
 group: root
 mode: '0644'
 backup: true

 # 기존 /etc/logrotate.d/syslog 목록에 /var/log/cmd.log 추가
 - name: 05. Ensure /var/log/cmd.log included in /etc/logrotate.d/syslog list
 ansible.builtin.lineinfile:
 path: /etc/logrotate.d/syslog
 regexp: '^/var/log/cmd\.log$'
 line: '/var/log/cmd.log'
 insertafter: '^/var/log/secure'
 backup: true

 - name: 06. Deploy /etc/profile.d/cmd_logging.sh
 ansible.builtin.copy:
 src: files/cmd_logging.sh
 dest: /etc/profile.d/cmd_logging.sh
 owner: root
 group: root
 mode: '0700'

 - name: 07. Ensure rsyslog rule for local1.notice -> /var/log/cmd.log
 ansible.builtin.lineinfile:
 path: /etc/rsyslog.conf
 regexp: '^local1\.notice'
 line: 'local1.notice /var/log/cmd.log'
 insertafter: EOF
 backup: true
 notify: restart rsyslog

 # limits.conf 끝에 설정 (중복 방지)
 - name: 08. Append soft nofile to limits.conf
 ansible.builtin.lineinfile:
 path: /etc/security/limits.conf
 line: '* soft nofile 65535'
 regexp: '^\* +soft +nofile +\d+'
 insertafter: EOF
 create: true
 state: present

 - name: 09. Append hard nofile to limits.conf
 ansible.builtin.lineinfile:
 path: /etc/security/limits.conf
 line: '* hard nofile 65535'
 regexp: '^\* +hard +nofile +\d+'
 insertafter: EOF
 create: true
 state: present

 # user.conf 끝에 설정 (중복 방지)
 - name: 10. Ensure DefaultLimitNOFILE=65535 at end of /etc/systemd/user.conf
 ansible.builtin.lineinfile:
 path: /etc/systemd/user.conf
 regexp: '^#?DefaultLimitNOFILE='
 line: 'DefaultLimitNOFILE=65535'
 insertafter: EOF
 create: true
 state: present

 - name: 11. Reload systemd daemon
 ansible.builtin.systemd:
 daemon_reload: true

task01: 로그/스크립트 디렉터리 생성
task02: logMoveDelete.sh 배포 및 권한 설정
task03: 로그 관리 스크립트 cron 등록
task04: /etc/logrotate.conf 정책 설정
task05: /etc/logrotate.d/syslog 목록 설정
task06: /etc/profile.d/cmd_logging.sh 배포
task07: rsyslog.conf 설정 추가 + rsyslog 재시작
task08/09: limits.conf에 nofile 65535 soft/hard 설정(중복 방지)
task10: DefaultLimitNOFILE 설정
task11: systemd daemon-reload

files/cmd_logging.sh

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14


#!/bin/bash
# bash 대화형 세션에서 명령을 로깅
function logging
{
 stat="$?"
 cmd=$(history|tail -1)
 remoteaddr=$(who am i)
 if [ "$cmd" != "$cmd_old" ]; then
 logger -p local1.notice "[2] STAT=$stat"
 logger -p local1.notice "[1] $USER=$remoteaddr, PID=$$, PWD=$PWD, CMD=$cmd"
 fi
 cmd_old=$cmd
}
trap logging DEBUG

files/logMoveDelete.sh

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11


#!/bin/bash
PATH=/usr/sbin:/usr/bin:/sbin:/bin

source_dir="/var/log"
backup_dir="/var/log/backup"

# .tar.gz 파일을 백업 디렉토리로 이동
mv "$source_dir"/*.tar.gz "$backup_dir" 2>/dev/null || true

# 1년이 지난 파일 삭제
find "$backup_dir" -name "*.tar.gz" -type f -mtime +365 -exec rm {} \;

files/logrotate.conf

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22


daily
rotate 365
create
dateext
compress
compresscmd /bin/gzip
compressext .gz
include /etc/logrotate.d

/var/log/wtmp {
 monthly
 create 0664 root utmp
 minsize 1M
 rotate 1
}

/var/log/btmp {
 missingok
 monthly
 create 0600 root utmp
 rotate 1
}

02. SAR 로그 설정

sysstat 활성화 및 관리 주기 설정

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59


---
- name: Enable and configure sysstat (sar)
 hosts: prod
 become: true

 handlers:
 - name: restart sysstat
 ansible.builtin.systemd:
 name: sysstat
 state: restarted
 enabled: true

 tasks:
 - name: 01. Ensure sysstat package is installed
 ansible.builtin.package:
 name: sysstat
 state: present

 - name: 02. Set HISTORY=365 in /etc/sysconfig/sysstat
 ansible.builtin.lineinfile:
 path: /etc/sysconfig/sysstat
 regexp: '^HISTORY='
 line: 'HISTORY=365'
 insertafter: EOF
 backup: true
 notify: restart sysstat

 - name: 03. Set COMPRESSAFTER=90 in /etc/sysconfig/sysstat
 ansible.builtin.lineinfile:
 path: /etc/sysconfig/sysstat
 regexp: '^COMPRESSAFTER='
 line: 'COMPRESSAFTER=90'
 insertafter: EOF
 notify: restart sysstat

 - name: 04. Set ZIP="gzip" in /etc/sysconfig/sysstat
 ansible.builtin.lineinfile:
 path: /etc/sysconfig/sysstat
 regexp: '^ZIP='
 line: 'ZIP="gzip"'
 insertafter: EOF
 notify: restart sysstat

 - name: 05. Install /etc/cron.d/sysstat
 ansible.builtin.copy:
 dest: /etc/cron.d/sysstat
 owner: root
 group: root
 mode: '0644'
 content: |
 */1 * * * * root /usr/lib64/sa/sa1 1 1
 53 23 * * * root /usr/lib64/sa/sa2 -A
 notify: restart sysstat

 - name: 06. Ensure sysstat service is enabled and started
 ansible.builtin.systemd:
 name: sysstat
 enabled: true
 state: started

task01: sysstat 패키지 설치 확인
task02, 03, 04: /etc/sysconfig/sysstat 설정
task05: /etc/cron.d/sysstat 생성
task06: sysstat 활성화

리눅스 CMD 로그, 시스템 로그 logrotate, openfile, sar 로그 설정

Thu, 30 Oct 2025 09:00:00 +0900

Redhat 계열 리눅스에서 시스템 로그 및 openfile, sar 등 기본 설정하는 방법

환경

OS: Rocky 8.10

개요

명령어 실행 기록은 history로도 볼수있지만 각 계정마다 저장 위치가 다르고 없어질 수도 있음
명령어 추적을 위해 CMD 로그를 활성화
로그 파일 용량 문제를 방지하기 위해 logrotate 설정
운영 중 파일이 동시에 열릴 수 있는 파일 디스크럽터 값 증설
- open file limit

설정

01. CMD 로그 설정

/etc/profile.d/cmd_logging.sh

cmd 로그 생성 스크립트

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12


function logging
{
 stat="$?"
 cmd=$(history|tail -1)
 remoteaddr=$(who am i)
 if [ "$cmd" != "$cmd_old" ]; then
 logger -p local1.notice "[2] STAT=$stat"
 logger -p local1.notice "[1] $USER=$remoteaddr, PID=$$, PWD=$PWD, CMD=$cmd"
 fi
 cmd_old=$cmd
}
trap logging DEBUG

권한 설정

1
2


chmod 700 /etc/profile.d/cmd_logging.sh
source /etc/profile.d/cmd_logging.sh

rsyslog 설정 변경

1

cp -aurp /etc/rsyslog.conf /home/ncloud24/rsyslog.conf.$(date +%Y%m%d)

/etc/rsyslog.conf
- 파일 하단에 추가
1

local1.notice /var/log/cmd.log
rsyslog 재기동
1

systemctl restart rsyslog

02. Logrotate 설정

1

cp /etc/logrotate.conf /etc/logrotate.conf.bak

vim /etc/logrotate.conf

1
2
3
4
5
6
7
8


daily # 매일 회전
rotate 365 # 365일(1년) 보관
create # 회전 후 새 파일 생성
dateext # 파일명에 날짜 확장자 사용
compress # 압축 활성화
compresscmd /bin/gzip
compressext .gz
include /etc/logrotate.d

로그 회전 대상에 cmd.log 추가

vim /etc/logrotate.d/syslog

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13


/var/log/cron
/var/log/maillog
/var/log/messages
/var/log/secure
/var/log/spooler
/var/log/cmd.log
{
 missingok
 sharedscripts
 postrotate
 /usr/bin/systemctl -s HUP kill rsyslog.service >/dev/null 2>&1 || true
 endscript
}

03. 로그 관리 설정

로그 백업 디렉토리 추가
1

mkdir -p /var/log/backup

/home/scripts/logMoveDelete.sh

로그 관리 스크립트

1
2
3
4
5
6
7
8


#!/bin/bash
PATH=/usr/sbin:/usr/bin:/sbin:/bin

source_dir="/var/log"
backup_dir="/var/log/backup"

mv "$source_dir"/*.tar.gz "$backup_dir" 2>/dev/null || true
find "$backup_dir" -name "*.tar.gz" -type f -mtime +365 -exec rm {} \;

권한 설정

1

chmod 700 /home/scripts/logMoveDelete.sh

cron 등록

1
2
3


crontab -e

0 1 * * * /home/scripts/logMoveDelete.sh

04. open file limit 설정

로그 및 서비스에서 파일 디스크립터 제한이 발생하지 않도록 상한값을 조정

1
2


echo '* soft nofile 65535' | sudo tee -a /etc/security/limits.conf
echo '* hard nofile 65535' | sudo tee -a /etc/security/limits.conf

/etc/systemd/user.conf
1

DefaultLimitNOFILE=65535

05. sar log 설정

sysstat 설정 변경

/etc/sysconfig/sysstat

1
2
3


HISTORY=365 # 데이터 보존 기간 (일 단위)
COMPRESSAFTER=90 # 90일 경과 시 gzip 압축
ZIP="gzip" # 압축 방식

/etc/cron.d/sysstat

1
2


*/1 * * * * root /usr/lib64/sa/sa1 1 1 # 1분마다 sa1 실행
53 23 * * * root /usr/lib64/sa/sa2 -A # 매일 23:53에 sa2 실행 (일간 요약)

sysstat 서비스 활성화
1

systemctl enable --now sysstat