logrotate --version
ls /etc/logrotate.d/
cat /etc/logrotate.conf
sudo logrotate -d /etc/logrotate.conf
sudo du -sh /var/log/* 2>/dev/null | sort -h

Phần thực hành mở rộng: quản lý log dài hạn mà không tự bắn vào chân

Log là vàng trong lúc sự cố, nhưng nếu không quản lý thì chính log lại làm đầy disk và gây ra outage. Bài này nên giúp người học hiểu mối quan hệ giữa retention, nén log, rotate và quá trình điều tra sự cố.

Lab 1: Khảo sát log đang chiếm bao nhiêu dung lượng

sudo du -sh /var/log
sudo du -sh /var/log/* | sort -h | tail -20
journalctl --disk-usage

Trước khi cấu hình rotate, phải biết nơi nào đang tăng nhanh nhất: nginx, syslog, app log hay journal.

Lab 2: Đọc cấu hình logrotate hiện có

cat /etc/logrotate.conf
ls -la /etc/logrotate.d
sudo grep -R "rotate\|daily\|weekly\|compress" /etc/logrotate.d

Hãy tập đọc ý nghĩa của các directive như daily, rotate, compress, missingok, copytruncate.

Lab 3: Tạo lab logrotate cho ứng dụng giả lập

mkdir -p ~/logrotate-lab
for i in $(seq 1 2000); do echo "line $i" >> ~/logrotate-lab/app.log; done
cat <<'EOF' | sudo tee /etc/logrotate.d/app-lab
/root/logrotate-lab/app.log {
    daily
    rotate 7
    compress
    missingok
    notifempty
    copytruncate
}
EOF

Sau đó test bằng:

sudo logrotate -d /etc/logrotate.conf
sudo logrotate -f /etc/logrotate.conf

Lab 4: Kiểm tra file sau khi rotate

ls -lah ~/logrotate-lab
zcat ~/logrotate-lab/app.log.1.gz | head -20

Không nên chỉ tin rằng rotate “đã chạy”; hãy mở file ra xem thật sự log cũ nằm ở đâu và có đọc lại được không.

Lab 5: Quản lý journald cơ bản

journalctl --disk-usage
sudo journalctl --vacuum-time=7d
sudo journalctl --vacuum-size=500M

Phần này giúp anh hiểu không phải log nào cũng nằm trong file text truyền thống.

Tình huống thực tế

Một app ghi log debug liên tục khiến ổ đĩa đầy lúc nửa đêm. Nếu logrotate cấu hình lỏng hoặc không có giới hạn journal, chỉ riêng log cũng có thể kéo theo database và web server cùng gặp sự cố.

Lỗi phổ biến

• Giữ log quá lâu trên ổ nhỏ.
• Dùng copytruncate mà không hiểu impact với ứng dụng ghi log tốc độ cao.
• Rotate xong nhưng service không reopen file log.
• Không có chính sách retention theo mức độ quan trọng của log.

Kết bài

Sau bài này, anh sẽ nhìn log không chỉ như dữ liệu chẩn đoán mà còn là tài nguyên cần quản trị. Quản lý log tốt giúp hệ thống vừa đủ dấu vết để điều tra, vừa không bị chính log bóp nghẹt. Bài tiếp theo sẽ gom nhiều kỹ năng trước đó lại thành một thứ rất quan trọng ngoài đời: quy trình troubleshooting production.