黑帽联盟

 找回密码
 会员注册
查看: 1541|回复: 0
打印 上一主题 下一主题

[基础服务] nginx日志按天生成&定期删除日志

[复制链接]

852

主题

38

听众

3181

积分

管理员

Rank: 9Rank: 9Rank: 9

  • TA的每日心情
    郁闷
    2024-5-10 17:49
  • 签到天数: 1543 天

    [LV.Master]伴坛终老

    nginx日志按天生成&定期删除日志

    问题:nginx会按照nginx.conf的配置生成access.log和error.log,随着访问量的增长,日志文件会越来越大,既会影响访问的速度(写入日志时间延长),也会增加查找日志的难度,nginx没有这种按天或更细粒度生成日志的机制。所以下面介绍两种方法:1.写脚本,通过定时任务按天重命名日志、重启nginx的方法实现(有重启失败的风险)2.通过工具cronolog实现。推荐方法二。

    1.方法一:创建分割日志文件的脚本,添加定时任务

    1.1写脚本:重命名日志文件、重启nginx

    例如存放路径:/usr/local/nginx/sbin/cut_nginx_logs.sh,按天分割具体内容:
    1. #!/bin/bash
    2. #function:cut nginx log files

    3. #set the path to nginx log files
    4. log_files_path="/data/nginxlog/"
    5. log_files_dir=${log_files_path}
    6. #set nginx log files you want to cut
    7. log_files_name=(access )
    8. #set the path to nginx.
    9. nginx_sbin="/usr/local/nginx/sbin/nginx"
    10. #Set how long you want to save
    11. save_days=30
    12. ############################################
    13. #Please do not modify the following script #
    14. ############################################
    15. #mkdir -p $log_files_dir
    16. log_files_num=${#log_files_name[@]}

    17. #cut nginx log files
    18. for((i=0;i<$log_files_num;i++));do
    19. mv ${log_files_path}${log_files_name[i]}.log ${log_files_dir}${log_files_name[i]}.log_$(date -d "yesterday" +"%Y-%m-%d")
    20. done

    21. #delete 30 days ago nginx log files
    22. find $log_files_path -mtime +$save_days -exec rm -rf {} \;

    23. #restart nginx
    24. $nginx_sbin -s reload
    复制代码
    1.2.使用crontab添加定时任务
    1. //打开定时任务
    2. crontab -e
    3. //进入编辑模式
    4. i
    5. //添加定时任务
    6. 00 00 * * * /bin/sh  /usr/local/nginx/sbin/cut_nginx_logs.sh
    7. //保存退出
    8. :wq!
    9. //重启crontab服务
    10. /etc/init.d/crond restart
    11. //查看定时任务,就会看到你添加的内容了
    12. crontab -l
    复制代码
    2. 方法二:通过cronolog工具实现

    2.1 下载安装cronolog

    2.1.1 下载:https://pan.baidu.com/s/1boJTMn9

    2.1.2 安装
    1. 1.解压缩
    2. # tar zxvf cronolog-1.6.2.tar.gz
    3. 2.进入安装文件所在目录
    4. # cd cronolog-1.6.2
    5. 3.运行安装
    6. # ./configure
    7. # make
    8. # make install
    9. 4.查看cronolog安装后所在目录(验证安装是否成功)
    10. # which cronolog
    11. 一般情况下显示为:/usr/local/sbin/cronolog
    复制代码
    2.2 使用cronolog

    2.2.1.创建命名管道
    1. mkfifo /usr/local/nginx/access_log_pipe
    复制代码
    2.2.2 配置cronolog,日期按天

    如果按小时使用access_%Y-%m-%d-%H.log;如果按分钟使用access_%Y-%m-%d-%H-%M.log

    2.2.3 修改配置/usr/local/nginx/conf/nginx.conf
    1. ...
    2. access_log  /usr/local/nginx/access_log_pipe  main;
    3. ...
    复制代码
    1. nohup cat /usr/local/nginx/access_log_pipe | /usr/local/sbin/cronolog /usr/local/nginx/logs/access-%Y-%m-%d.log &
    复制代码
    2.2.4 重启nginx
    1. cd /usr/local/nginx/sbin
    2. ./nginx -s reload
    复制代码
    2.2.5 查看效果
    1. [root@app2 /]# cd /usr/local/nginx/logs/
    2. [root@app2 logs]# ll
    3. total 3544
    4. -rw-r--r-- 1 root root       0 Oct  1 07:20 8099.access.log
    5. -rw-r--r-- 1 root root 3599534 Oct  1 07:58 access-2016-10-01.log
    6. -rw-r--r-- 1 root root     235 Oct  1 07:20 error.log
    7. -rw-r--r-- 1 root root       5 Oct  1 06:34 nginx.pid
    复制代码
    2.3 定期删除日志

    2.3.1 新建sh,删除5天前的
    1. [root@app2 sh]# pwd
    2. /usr/local/nginx/sh
    3. [root@app2 sh]# vi delete_nginx_logs.sh
    复制代码
    添加内容
    1. #set the path to nginx log files
    2. log_files_path="/usr/local/nginx/logs/"
    3. save_days=5
    4. #delete ? days ago nginx log files
    5. find $log_files_path -mtime +$save_days -exec rm -rf {} \;
    复制代码
    2.3.2 添加定时任务
    1. [root@localhost sh]# crontab -e
    2. 00 00 * * * /bin/sh  /usr/local/nginx/sh/delete_nginx_logs.sh
    复制代码
    帖子永久地址: 

    黑帽联盟 - 论坛版权1、本主题所有言论和图片纯属会员个人意见,与本论坛立场无关
    2、本站所有主题由该帖子作者发表,该帖子作者与黑帽联盟享有帖子相关版权
    3、其他单位或个人使用、转载或引用本文时必须同时征得该帖子作者和黑帽联盟的同意
    4、帖子作者须承担一切因本文发表而直接或间接导致的民事或刑事法律责任
    5、本帖部分内容转载自其它媒体,但并不代表本站赞同其观点和对其真实性负责
    6、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除并致以最深的歉意
    7、黑帽联盟管理员和版主有权不事先通知发贴者而删除本文

    勿忘初心,方得始终!
    您需要登录后才可以回帖 登录 | 会员注册

    发布主题 !fastreply! 收藏帖子 返回列表 搜索
    回顶部