黑帽联盟

标题: nginx日志按天生成&定期删除日志 [打印本页]

---

作者: 定位    时间: 2017-3-31 14:04
标题: nginx日志按天生成&定期删除日志
nginx日志按天生成&定期删除日志

问题：nginx会按照nginx.conf的配置生成access.log和error.log，随着访问量的增长，日志文件会越来越大，既会影响访问的速度(写入日志时间延长)，也会增加查找日志的难度，nginx没有这种按天或更细粒度生成日志的机制。所以下面介绍两种方法：1.写脚本，通过定时任务按天重命名日志、重启nginx的方法实现（有重启失败的风险）2.通过工具cronolog实现。推荐方法二。

1.方法一：创建分割日志文件的脚本，添加定时任务

1.1写脚本：重命名日志文件、重启nginx

例如存放路径：/usr/local/nginx/sbin/cut_nginx_logs.sh,按天分割具体内容：

1. #!/bin/bash
   
2. #function:cut nginx log files
   
3. 
   
4. #set the path to nginx log files
   
5. log_files_path="/data/nginxlog/"
   
6. log_files_dir=${log_files_path}
   
7. #set nginx log files you want to cut
   
8. log_files_name=(access )
   
9. #set the path to nginx.
   
10. nginx_sbin="/usr/local/nginx/sbin/nginx"
    
11. #Set how long you want to save
    
12. save_days=30
    
13. ############################################
    
14. #Please do not modify the following script #
    
15. ############################################
    
16. #mkdir -p $log_files_dir
    
17. log_files_num=${#log_files_name[@]}
    
18. 
    
19. #cut nginx log files
    
20. for((i=0;i<$log_files_num;i++));do
    
21. mv ${log_files_path}${log_files_name[i]}.log ${log_files_dir}${log_files_name[i]}.log_$(date -d "yesterday" +"%Y-%m-%d")
    
22. done
    
23. 
    
24. #delete 30 days ago nginx log files
    
25. find $log_files_path -mtime +$save_days -exec rm -rf {} \;
    
26. 
    
27. #restart nginx
    
28. $nginx_sbin -s reload

复制代码

1.2.使用crontab添加定时任务

1. //打开定时任务
   
2. crontab -e
   
3. //进入编辑模式
   
4. i
   
5. //添加定时任务
   
6. 00 00 * * * /bin/sh  /usr/local/nginx/sbin/cut_nginx_logs.sh
   
7. //保存退出
   
8. :wq！
   
9. //重启crontab服务
   
10. /etc/init.d/crond restart
    
11. //查看定时任务,就会看到你添加的内容了
    
12. crontab -l

复制代码

2. 方法二：通过cronolog工具实现

2.1 下载安装cronolog

2.1.1 下载：https://pan.baidu.com/s/1boJTMn9

2.1.2 安装

1. 1.解压缩
   
2. # tar zxvf cronolog-1.6.2.tar.gz
   
3. 2.进入安装文件所在目录
   
4. # cd cronolog-1.6.2
   
5. 3.运行安装
   
6. # ./configure
   
7. # make
   
8. # make install
   
9. 4.查看cronolog安装后所在目录（验证安装是否成功）
   
10. # which cronolog
    
11. 一般情况下显示为：/usr/local/sbin/cronolog

复制代码

2.2 使用cronolog

2.2.1.创建命名管道

1. mkfifo /usr/local/nginx/access_log_pipe

复制代码

2.2.2 配置cronolog,日期按天

如果按小时使用access_%Y-%m-%d-%H.log;如果按分钟使用access_%Y-%m-%d-%H-%M.log

2.2.3 修改配置/usr/local/nginx/conf/nginx.conf

1. ...
   
2. access_log  /usr/local/nginx/access_log_pipe  main;
   
3. ...

复制代码

1. nohup cat /usr/local/nginx/access_log_pipe | /usr/local/sbin/cronolog /usr/local/nginx/logs/access-%Y-%m-%d.log &

复制代码

2.2.4 重启nginx

1. cd /usr/local/nginx/sbin
   
2. ./nginx -s reload

复制代码

2.2.5 查看效果

1. [root@app2 /]# cd /usr/local/nginx/logs/
   
2. [root@app2 logs]# ll
   
3. total 3544
   
4. -rw-r--r-- 1 root root       0 Oct  1 07:20 8099.access.log
   
5. -rw-r--r-- 1 root root 3599534 Oct  1 07:58 access-2016-10-01.log
   
6. -rw-r--r-- 1 root root     235 Oct  1 07:20 error.log
   
7. -rw-r--r-- 1 root root       5 Oct  1 06:34 nginx.pid

复制代码

2.3 定期删除日志

2.3.1 新建sh,删除5天前的

1. [root@app2 sh]# pwd
   
2. /usr/local/nginx/sh
   
3. [root@app2 sh]# vi delete_nginx_logs.sh

复制代码

添加内容

1. #set the path to nginx log files
   
2. log_files_path="/usr/local/nginx/logs/"
   
3. save_days=5
   
4. #delete ? days ago nginx log files
   
5. find $log_files_path -mtime +$save_days -exec rm -rf {} \;

复制代码

2.3.2 添加定时任务

1. [root@localhost sh]# crontab -e
   
2. 00 00 * * * /bin/sh  /usr/local/nginx/sh/delete_nginx_logs.sh

复制代码

---

欢迎光临 黑帽联盟 (https://bbs.cnblackhat.com/)

Powered by Discuz! X2.5