linux logrotate

Linux日志文件总管——logrotate

2014-10-30 23:07   评论: 5 收藏: 7 分享:
10

编译自：http://xmodulo.com/2014/09/logrotate-manage-log-files-linux.html
作者： Sarmed Rahman

原创：LCTT
https://linux.cn/article-4126-1.html
译者： GOLinux

本文地址：https://linux.cn/article-4126-1.html

日志文件包含了关于系统中发生的事件的有用信息，在排障过程中或者系统性能分析时经常被用到。对于忙碌的服务器，日志文件大小会增长极快，服务器会很快消耗磁盘空间，这成了个问题。除此之外，处理一个单个的庞大日志文件也常常是件十分棘手的事。

logrotate是个十分有用的工具，它可以自动对日志进行截断（或轮循）、压缩以及删除旧的日志文件。例如，你可以设置logrotate，让/var/log/foo日志文件每30天轮循，并删除超过6个月的日志。配置完后，logrotate的运作完全自动化，不必进行任何进一步的人为干预。另外，旧日志也可以通过电子邮件发送，不过该选项超出了本教程的讨论范围。

主流Linux发行版上都默认安装有logrotate包，如果出于某种原因，logrotate没有出现在里头，你可以使用apt-get或yum命令来安装。

在Debian或Ubuntu上：

    

  1. # apt-get install logrotate cron
    2.

在Fedora，CentOS或RHEL上：

    

  1. # yum install logrotate crontabs
    2.

logrotate的配置文件是/etc/logrotate.conf，通常不需要对它进行修改。日志文件的轮循设置在独立的配置文件中，它（们）放在/etc/logrotate.d/目录下。

样例一

在第一个样例中，我们将创建一个10MB的日志文件/var/log/log-file。我们将展示怎样使用logrotate来管理该日志文件。

我们从创建一个日志文件开始吧，然后在其中填入一个10MB的随机比特流数据。

    

  1. # touch /var/log/log-file
    2. 

  2. # head -c 10M < /dev/urandom > /var/log/log-file
    3.

由于现在日志文件已经准备好，我们将配置logrotate来轮循该日志文件。让我们为该文件创建一个配置文件。

    

  1. # vim /etc/logrotate.d/log-file
    2. 



    

  1. /var/log/log-file {
    2. 

  2. monthly
    3. 

  3. rotate 5
    4. 

  4. compress
    5. 

  5. delaycompress
    6. 

  6. missingok
    7. 

  7. notifempty
    8. 

  8. create 644 root root
    9. 

  9. postrotate
    10. 

  10. /usr/bin/killall -HUP rsyslogd
    11. 

  11. endscript
    12. 

  12. }
    13.

这里：

  • monthly: 日志文件将按月轮循。其它可用值为‘daily’，‘weekly’或者‘yearly’。
  • rotate 5: 一次将存储5个归档日志。对于第六个归档，时间最久的归档将被删除。
  • compress: 在轮循任务完成后，已轮循的归档将使用gzip进行压缩。
  • delaycompress: 总是与compress选项一起用，delaycompress选项指示logrotate不要将最近的归档压缩，压缩将在下一次轮循周期进行。这在你或任何软件仍然需要读取最新归档时很有用。
  • missingok: 在日志轮循期间，任何错误将被忽略，例如“文件无法找到”之类的错误。
  • notifempty: 如果日志文件为空，轮循不会进行。
  • create 644 root root: 以指定的权限创建全新的日志文件，同时logrotate也会重命名原始日志文件。
  • postrotate/endscript: 在所有其它指令完成后，postrotate和endscript里面指定的命令将被执行。在这种情况下，rsyslogd 进程将立即再次读取其配置并继续运行。

上面的模板是通用的，而配置参数则根据你的需求进行调整，不是所有的参数都是必要的。

样例二

在本例中，我们只想要轮循一个日志文件，然而日志文件大小可以增长到50MB。

    

  1. # vim /etc/logrotate.d/log-file
    2. 



    

  1. /var/log/log-file {
    2. 

  2. size=50M
    3. 

  3. rotate 5
    4. 

  4. create 644 root root
    5. 

  5. postrotate
    6. 

  6. /usr/bin/killall -HUP rsyslogd
    7. 

  7. endscript
    8. 

  8. }
    9.

样例三

我们想要让旧日志文件以创建日期命名，这可以通过添加dateext常熟实现。

    

  1. # vim /etc/logrotate.d/log-file
    2. 



    

  1. /var/log/log-file {
    2. 

  2. monthly
    3. 

  3. rotate 5
    4. 

  4. dateext
    5. 

  5. create 644 root root
    6. 

  6. postrotate
    7. 

  7. /usr/bin/killall -HUP rsyslogd
    8. 

  8. endscript
    9. 

  9. }
    10.

这将让归档文件在它们的文件名中包含日期信息。

排障

这里提供了一些logrotate设置的排障提示。

1. 手动运行logrotate

logrotate可以在任何时候从命令行手动调用。

要调用为/etc/lograte.d/下配置的所有日志调用logrotate：

    

  1. # logrotate /etc/logrotate.conf
    2.

要为某个特定的配置调用logrotate：

    

  1. # logrotate /etc/logrotate.d/log-file
    2.

2. 演练

排障过程中的最佳选择是使用‘-d’选项以预演方式运行logrotate。要进行验证，不用实际轮循任何日志文件，可以模拟演练日志轮循并显示其输出。

    

  1. # logrotate -d /etc/logrotate.d/log-file
    2.

正如我们从上面的输出结果可以看到的，logrotate判断该轮循是不必要的。如果文件的时间小于一天，这就会发生了。

3. 强制轮循

即使轮循条件没有满足，我们也可以通过使用‘-f’选项来强制logrotate轮循日志文件，‘-v’参数提供了详细的输出。

    

  1. # logrotate -vf /etc/logrotate.d/log-file
    2. 



    

  1. reading config file /etc/logrotate.d/log-file
    2. 

  2. reading config info for /var/log/log-file
    3. 

  3. Handling 1 logs
    4. 

  4. rotating pattern: /var/log/log-file  forced from command line (5 rotations)
    5. 

  5. empty log files are rotated, old logs are removed
    6. 

  6. considering log /var/log/log-file
    7. 

  7. log needs rotating
    8. 

  8. rotating log /var/log/log-file, log->rotateCount is 5
    9. 

  9. dateext suffix ‘-20140916‘
    10. 

  10. glob pattern ‘-[0-9][0-9][0-9][0-9][0-9][0-9][0-9][0-9]‘
    11. 

  11. renaming /var/log/log-file.5.gz to /var/log/log-file.6.gz (rotatecount 5, logstart 1, i 5),
    12. 

  12. old log /var/log/log-file.5.gz does not exist
    13. 

  13. renaming /var/log/log-file.4.gz to /var/log/log-file.5.gz (rotatecount 5, logstart 1, i 4),
    14. 

  14. old log /var/log/log-file.4.gz does not exist
    15. 

  15. . . .
    16. 

  16. renaming /var/log/log-file.0.gz to /var/log/log-file.1.gz (rotatecount 5, logstart 1, i 0),
    17. 

  17. old log /var/log/log-file.0.gz does not exist
    18. 

  18. log /var/log/log-file.6.gz doesn‘t exist -- won‘t try to dispose of it
    19. 

  19. renaming /var/log/log-file to /var/log/log-file.1
    20. 

  20. creating new /var/log/log-file mode = 0644 uid = 0 gid = 0
    21. 

  21. running postrotate script
    22. 

  22. compressing log with: /bin/gzip
    23.

4. Logrotate的记录日志

logrotate自身的日志通常存放于/var/lib/logrotate/status目录。如果处于排障目的，我们想要logrotate记录到任何指定的文件，我们可以指定像下面这样从命令行指定。

    

  1. # logrotate -vf –s /var/log/logrotate-status /etc/logrotate.d/log-file
    2.

5. Logrotate定时任务

logrotate需要的cron任务应该在安装时就自动创建了，我把cron文件的内容贴出来，以供大家参考。

    

  1. # cat /etc/cron.daily/logrotate
    2. 



    

  1. #!/bin/sh
    2. 

  2. # Clean non existent log file entries from status file
    3. 

  3. cd /var/lib/logrotate
    4. 

  4. test -e status || touch status
    5. 

  5. head -1 status > status.clean
    6. 

  6. sed ‘s/"//g‘ status | while read logfile date
    7. 

  7. do
    8. 

  8. [ -e "$logfile" ] && echo "\"$logfile\" $date"
    9. 

  9. done >> status.clean
    10. 

  10. mv status.clean status
    11. 

  11. test -x /usr/sbin/logrotate || exit 0
    12. 

  12. /usr/sbin/logrotate /etc/logrotate.conf
    13.

小结一下，logrotate工具对于防止因庞大的日志文件而耗尽存储空间是十分有用的。配置完毕后，进程是全自动的，可以长时间在不需要人为干预下运行。本教程重点关注几个使用logrotate的几个基本样例，你也可以定制它以满足你的需求。

希望本文对你有所帮助。

时间： 2024-11-09 00:44:04

linux logrotate的相关文章

linux logrotate 日志文件roll up

log rotate vi /etc/logrotate.d/spark : /apps/svr/spark-1.1.1-bin-cdh4/logs/mercury-spark-span.log{    notifempty    daily    rotate 5    compress    olddir /apps/svr/spark-1.1.1-bin-cdh4/logs/    missingok    copytruncate} execute: /usr/sbin/logrotat

linux logrotate 删除某天前

crontab crontab -l 01 */2 * * * /usr/sbin/logrotate -v /opt/shell_app/appengine >/tmp/logrotate.log 2>&1 logrotate $ cat /opt/shell_app/appengine compress daily size 10M missingok rotate 7 /ebs_data/opt/typhoonae/var/log/http*.log { rotate 1 pre

linux下logrotate 配置和理解

对于Linux 的系统安全来说,日志文件是极其重要的工具.系统管理员可以使用logrotate 程序用来管理系统中的最新的事件,对于Linux 的系统安全来说,日志文件是极其重要的工具.系统管理员可以使用logrotate 程序用来管理系统中的最新的事件.logrotate 还可以用来备份日志文件,本篇将通过以下几部分来介绍 日志文件的管理:1.logrotate 配置2.缺省配置 logrotate3.使用include 选项读取其他配置文件4.使用include 选项覆盖缺省配置5.为指定的

linux下日志管理工具--logrotate

配置 /usr/local/nginx/logs/*.log { daily dateext rotate 1 olddir /usr/local/nginx/other/logs missingok notifempty compress sharedscripts postrotate /bin/kill -USR1 $(cat /var/run/nginx.pid 2>/dev/null) 2>/dev/null ||: endscript } dateext:文件后缀是日期格式,也就是

Linux系统使用logrotate进行日志备份

Linux系统上日志文件很多很多,系统日志message mail cron 等等以及应用程序的日志和访问日志,在大量的访问下,这些日志文件会飞速增长,占用大量私盘空间,同时消耗IO,目前线上使用shell脚本对nginx和tomcat的access_log以及catalina.out文件通过crontab进行日志分割. 今天偶然想起logrotate,小试了下,还是不错的,记录下... 查看下log目录下的日志,可以看到关于crontab的日志被分割了,我们没有定义这个,是什么实现的呢?就是l

使用linux服务logrotate归档tomcat日志文件

使用notepad++编辑本地文件 tomcat: /usr/tomcat/logs/catalina.out { copytruncate daily dateext nocompress missingok }   参考下图部署此文件到linux服务器: 使用linux服务logrotate归档tomcat日志文件,布布扣,bubuko.com

Linux下logrotate日志轮转操作梳理

对于Linux系统安全来说,日志文件是极其重要的工具.logrotate程序是一个日志文件管理工具.用于分割日志文件,删除旧的日志文件,并创建新的日志文件,起到"转储"作用.可以节省磁盘空间.下面就对logrotate日志轮转操作做一梳理记录: 1)配置文件介绍Linux系统默认安装logrotate工具,它默认的配置文件在:/etc/logrotate.conf/etc/logrotate.d/ logrotate.conf 才主要的配置文件,logrotate.d 是一个目录,该目

linux之使用cron,logrotate管理日志文件

1) logrotate配置   logrotate 程序是一个日志文件管理工具.用来把旧的日志文件删除,并创建新的日志文件,我们把它叫做“转储”.   我们可以根据日志文件的大小,也可以根据其天数来转储,这个过程一般通过 cron 程序来执行.   logrotate 程序还可以用于压缩日志文件,以及发送日志到指定的E-mail . logrotate 的配置文件是 /etc/logrotate.conf  主要参数如下表: 参数                         功能   co

Linux的日志文件管理工具——logrotate（linux日志切割与轮循）

日志文件包含了关于系统中发生的事件的有用信息,在排障过程中或者系统性能分析时经常被用到.对于忙碌的服务器,日志文件大小会增长极快,服务器会很快消耗磁盘空间,这成了个问题.除此之外,处理一个单个的庞大日志文件也常常是件十分棘手的事. Linux日志切割 现代的Linux版本都有一个小程序,名为logrotate,用来帮助用户管理日志文件,它以自己的守护进程工作.logrotate周期性地旋转日志文件,可以周期性地把每个日志文件重命名成一个备份名字,然后让它的守护进程开始使用一个日志文件的新的拷贝.