Debian Jessie com systemd: arquivos de log inchados nunca são excluídos

0

Eu tenho uma distro Debian Jessie razoavelmente baixa, na qual arquivos de log sob /var/log estão sendo rotacionados (aparentemente arbitrariamente) mas nunca deletados:

$ sudo du -sk /var/log/* | sort -rn
4167364 /var/log/daemon.log.1
1710535 /var/log/daemon.log
596240  /var/log/syslog.1
521091  /var/log/syslog
19905   /var/log/daemon.log.2.gz
15803   /var/log/syslog.4.gz
15187   /var/log/syslog.5.gz
14598   /var/log/syslog.7.gz
14595   /var/log/syslog.6.gz
14545   /var/log/syslog.3.gz
14496   /var/log/syslog.2.gz
1365    /var/log/messages.1
476 /var/log/kern.log.1
403 /var/log/messages
286 /var/log/lastlog
229 /var/log/auth.log.1
128 /var/log/syslog.1.gz
95  /var/log/auth.log
56  /var/log/wtmp
35  /var/log/debug.1
24  /var/log/faillog
19  /var/log/messages.2.gz
11  /var/log/kern.log.2.gz
3   /var/log/fsck
3   /var/log/debug.2.gz
3   /var/log/auth.log.2.gz
3   /var/log/apt
2   /var/log/kern.log
1   /var/log/sysstat
1   /var/log/dpkg.log
1   /var/log/dmesg
1   /var/log/alternatives.log
0   /var/log/debug
0   /var/log/btmp

Agora, da minha leitura da documentação do journald.conf, o padrão SystemKeepFree é 15% e SystemMaxuse é 10%, então não entendo por que eles estão crescendo tão grande. Minha raiz é na verdade apenas 8GB, então descobri isso porque meu uso de rootfs chegou a 100%:

$ df
Filesystem     1K-blocks    Used Available Use% Mounted on
/dev/root        7529518 7525422         0 100% /
....

Ocorreu-me que o rsyslog pode ser o responsável por gravar esses arquivos em /var/log e há um estoque /etc/ryslog.conf . Mas então por que parece que os arquivos estão sendo girados em alguns casos, mas nunca excluídos?

/etc/rsyslog.conf para referência:

$ cat /etc/rsyslog.conf 
#  /etc/rsyslog.conf    Configuration file for rsyslog.
#
#           For more information see
#           /usr/share/doc/rsyslog-doc/html/rsyslog_conf.html


#################
#### MODULES ####
#################

$ModLoad imuxsock # provides support for local system logging
$ModLoad imklog   # provides kernel logging support
#$ModLoad immark  # provides --MARK-- message capability

# provides UDP syslog reception
#$ModLoad imudp
#$UDPServerRun 514

# provides TCP syslog reception
#$ModLoad imtcp
#$InputTCPServerRun 514


###########################
#### GLOBAL DIRECTIVES ####
###########################

#
# Use traditional timestamp format.
# To enable high precision timestamps, comment out the following line.
#
$ActionFileDefaultTemplate RSYSLOG_TraditionalFileFormat

#
# Set the default permissions for all log files.
#
$FileOwner root
$FileGroup adm
$FileCreateMode 0640
$DirCreateMode 0755
$Umask 0022

#
# Where to place spool and state files
#
$WorkDirectory /var/spool/rsyslog

#
# Include all config files in /etc/rsyslog.d/
#
$IncludeConfig /etc/rsyslog.d/*.conf


###############
#### RULES ####
###############

#
# First some standard log files.  Log by facility.
#
auth,authpriv.*         /var/log/auth.log
*.*;auth,authpriv.none      -/var/log/syslog
#cron.*             /var/log/cron.log
daemon.*            -/var/log/daemon.log
kern.*              -/var/log/kern.log
lpr.*               -/var/log/lpr.log
mail.*              -/var/log/mail.log
user.*              -/var/log/user.log

#
# Logging for the mail system.  Split it up so that
# it is easy to write scripts to parse these files.
#
mail.info           -/var/log/mail.info
mail.warn           -/var/log/mail.warn
mail.err            /var/log/mail.err

#
# Logging for INN news system.
#
news.crit           /var/log/news/news.crit
news.err            /var/log/news/news.err
news.notice         -/var/log/news/news.notice

#
# Some "catch-all" log files.
#
*.=debug;\
  auth,authpriv.none;\
  news.none;mail.none   -/var/log/debug
*.=info;*.=notice;*.=warn;\
  auth,authpriv.none;\
  cron,daemon.none;\
  mail,news.none        -/var/log/messages

#
# Emergencies are sent to everybody logged in.
#
*.emerg             :omusrmsg:*

#
# I like to have messages displayed on the console, but only on a virtual
# console I usually leave idle.
#
#daemon,mail.*;\
#   news.=crit;news.=err;news.=notice;\
#   *.=debug;*.=info;\
#   *.=notice;*.=warn   /dev/tty8

# The named pipe /dev/xconsole is for the 'xconsole' utility.  To use it,
# you must invoke 'xconsole' with the '-file' option:
# 
#    $ xconsole -file /dev/xconsole [...]
#
# NOTE: adjust the list below, or you'll go crazy if you have a reasonably
#      busy site..
#
daemon.*;mail.*;\
  news.err;\
  *.=debug;*.=info;\
  *.=notice;*.=warn |/dev/xconsole

(nada sob /etc/rsyslog.d/)

Conf estoque em /etc/systemd/journald.conf :

#  This file is part of systemd.
#
#  systemd is free software; you can redistribute it and/or modify it
#  under the terms of the GNU Lesser General Public License as published by
#  the Free Software Foundation; either version 2.1 of the License, or
#  (at your option) any later version.
#
# Entries in this file show the compile time defaults.
# You can change settings by editing this file.
# Defaults can be restored by simply deleting this file.
#
# See journald.conf(5) for details.

[Journal]
#Storage=auto
#Compress=yes
#Seal=yes
#SplitMode=uid
#SyncIntervalSec=5m
#RateLimitIntervalSec=30s
#RateLimitBurst=1000
#SystemMaxUse=
#SystemKeepFree=
#SystemMaxFileSize=
#SystemMaxFiles=100
#RuntimeMaxUse=
#RuntimeKeepFree=
#RuntimeMaxFileSize=
#RuntimeMaxFiles=100
#MaxRetentionSec=
#MaxFileSec=1month
#ForwardToSyslog=yes
#ForwardToKMsg=no
#ForwardToConsole=no
#ForwardToWall=yes
#TTYPath=/dev/console
#MaxLevelStore=debug
#MaxLevelSyslog=debug
#MaxLevelKMsg=notice
#MaxLevelConsole=info
#MaxLevelWall=emerg

E eu realmente adicionei um arquivo em journald.conf.d:

$ cat /etc/systemd/journald.conf.d/custom.conf 
# See: https://www.freedesktop.org/software/systemd/man/journald.conf.html
# vi: ft=dosini

[Journal]
MaxFileSec=0
SystemMaxUse=5M
Compress=yes
# Uncomment this to never write to FS:
#Storage=volatile

Então, alguma rotação está acontecendo, mas não de forma consistente e não está sendo limitada no que o journald diz que deveria ser.

Observe que estou executando o systemd-230 a partir do jessie-backports.

Perguntas

  • O que já está girando os arquivos?
  • Por que o uso total não está sendo limitado conforme o esperado?
  • O journald realmente está escrevendo esses arquivos ou é rsyslog? (Na verdade, não consigo ver nenhum outro local em /var , onde o journald está armazenando dados, binários ou outros.)
  • Posso definir limites de tamanho de arquivo na configuração do rsyslog?
  • Eu preciso do logrotate para fazer isso por mim? Preferiria se journald ou rsyslogd pudessem lidar com isso diretamente.

Obrigado!

Atualizar Embora a documentação do journald.conf sugira ForwardToSyslog=no por padrão, olhando mais de perto o arquivo journald.conf que eu postei, ele diz que o padrão compilado é ForwardToSyslog=yes . Então parece que o rsyslog está fazendo isso em /var/log

    
por Thom Nichols 28.06.2017 / 18:53

1 resposta

1

logrotated de fato gerencia esses logs (para rsyslog e outros). Mas ... você está vendo os mesmos nomes de arquivos constantemente, então pode ser o que você está pensando. A configuração padrão é manter 4 ou 7 logs antigos e log atual. Aqui está a configuração padrão - você pode ver que / var / log / syslog manterá 7 mais log atual, os outros manterão 4.

debian@templatevm:~$ cat /etc/logrotate.d/rsyslog 
/var/log/syslog
{
    rotate 7
    daily
    missingok
    notifempty
    delaycompress
    compress
    postrotate
        invoke-rc.d rsyslog rotate > /dev/null
    endscript
}

/var/log/mail.info
/var/log/mail.warn
/var/log/mail.err
/var/log/mail.log
/var/log/daemon.log
/var/log/kern.log
/var/log/auth.log
/var/log/user.log
/var/log/lpr.log
/var/log/cron.log
/var/log/debug
/var/log/messages
{
    rotate 4
    weekly
    missingok
    notifempty
    compress
    delaycompress
    sharedscripts
    postrotate
        invoke-rc.d rsyslog rotate > /dev/null
    endscript
}

Se você quiser girar com base apenas no tamanho, altere o parâmetro daily para size NNNN , em que o N é um tamanho com medida como 100M - então, size 100M para limitar a 100mb

Então, se os seus arquivos de log tendem a crescer rapidamente, você pode alterar a frequência de quantas vezes o logrotate verifica colocando o link simbólico em /etc/cron.hourly em vez de /etc/cron.daily

Veja como seu novo arquivo /etc/logrotate.d/rsyslog pode se parecer

/var/log/syslog
{
    rotate 7
    daily
    missingok
    notifempty
    delaycompress
    compress
    postrotate
        invoke-rc.d rsyslog rotate > /dev/null
    endscript
}

/var/log/mail.info
/var/log/mail.warn
/var/log/mail.err
/var/log/mail.log
/var/log/daemon.log
/var/log/kern.log
/var/log/auth.log
/var/log/user.log
/var/log/lpr.log
/var/log/cron.log
/var/log/debug
/var/log/messages
{
    rotate 4
    size 25M
    missingok
    notifempty
    compress
    delaycompress
    sharedscripts
    postrotate
        invoke-rc.d rsyslog rotate > /dev/null
    endscript
} 
    
por 28.06.2017 / 19:18