linux自动清理日志的方法分享

1.做自动部署系统时精简的一个脚本,主要功能是清理所有目录的日志

2.根据给定日志目录,删除时间 结合crontab进行清理日志,清理完成后,后在/var/log/deltelog/ 生成按照月的清理日志

3.扩展,因为脚本采用mtime(最后修改时间)进行删除,所以可以适用于删除过期备份等,不受文件名称的限制

shell小窍门

find –type f –print 时会根据换行或者空格来输出查找的文件,在不同的sh下有不同的`反应,如果不做处理结合xargs 进行删除 更改 *** 作,会有影响

所以需要增加 –print0 用 null来 作为边界符号,才敢结婚 xargs –o 来格式化输入

使用find 的时候 遵循最小结果集原则,find解析式从左到右,所有确保你在最左边的过滤符号能够过滤最大数据

你可以根据你的需要增加到crontab中

shell脚本

复制代码 代码如下:

#!/bin/sh

###########################

# log blog.duplicatedcode.com

# in_day_num: like 1 2 is 2day ago logs

# in_log_path like tomcat log home

###########################

in_log_path=${1}

in_day_num=${2}

tmp__log=/var/log/log/"`date +%Y%m`.log"

Log()

{

inner_num=${1}

#find log

echo "[`date`] >>start logs---" >>$tmp__log

find ${in_log_path} -type f -mtime ${inner_num} -print0 | xargs -0 rm -rf

echo "[`date`] >>end logs---" >>$tmp__log

}

init()

{

mkdir -p /var/log/log/

}

main()

{

init

if [ -z ${in_log_path} ]then

echo "[`date`] >>error log_path not init---" >>$tmp__log

return

fi

inner_day_num=+7

if [[ -n ${in_day_num} ]] &&[[ ${in_day_num} -ge 1 ]] then

${inner_day_num}=${in_day_num}

fi

Log ${inner_day_num}

}

main

         nohup命令 将程序以忽略挂起信号的方式运行起来，被运行的程序的输出信息将不会显示到终端。一般用于将程序的输出、报错信息重定向到一个指定路径的指定文件。语法 ：nohup [command] [args] [&]     nohup命令 最后要带个&作为结束 例：nohup python XXX.py >abc/def/XXX.log 2>&1 & args： 0 – stdin (standard input)，1 – stdout (standard output)，2 – stderr (standard error) ； 2>&1是将标准错误（2）重定向到标准输出（&1），标准输出（&1）再被重定向输入到文件，即XXX.log中。 nohup命令的缺点：日志文件文件越来越大，占内存且查看麻烦。因为这个日志文件和程序是共生死的，因为只要程序运行起来，就一直对log文件进行读写，直接删除XXX.log会导致程序也被结束了。 目前想到的一些相关方法如下，并未完全解决问题。 参考： linux下nohup日志输出过大问题解决方案split命令： 参数：-b：值为每一输出档案的大小，单位为 byte。            -C：每一输出档中，单行的最大 byte 数。            -d：使用数字作为后缀。默认这个数字后缀是两位的，例如00，01，11. -a: 指定位数，例如 -a 4表示后缀是四位的。            -l：值为每一输出档的列数大小。            PREFIX:代表前导符，可作为切割文件的前导文件。 例如：可以用split命令把很大的日志文件分成多个小文件，分割完成后 原文件不变 。不会影响nohup运行的程序。 缺点：split文件分割依赖手动，当程序出故障或调试时，将日志分割以便查看最新的日志信息。没法定时做到定时自动清理。首先介绍find命令的参数参考： linux find命令详解在这里主要用到的是这几个参数： -atime n 查找系统中最后n*24小时访问的文件 -ctime n  查找系统中最后n*24小时被改变文件状态的文件 -mtime n  查找系统中最后n*24小时被改变文件数据的文件 +n: n天前； -n: n天之内find命令还可以和下一条命令连用（xargs或exec)或 注：{}表示find到的东西；{}和 \之间要有一个空格 我感觉exec不是很好用，怪怪的cat dev/null在 Linux 中， null 设备基本上被用来丢弃某个进程不再需要的输出流，或者作为某个输入流的空白文件，这些通常可以利用重定向机制来达到。 所以 /dev/null 设备文件是一个特殊的文件，它将清空送到它这里来的所有输入，而它的输出则可被视为一个空文件。另外，你可以通过使用 cat 命令显示 /dev/null 的内容然后重定向输出到某个文件，以此来达到清空该文件的目的。通过使用cat /dev/null，文件大小为0字节。 用cat删除文件： 但是我发现对于nohup的程序的日志，这样是无效的。因为nohup的程序持续不断地在读写日志文件，此时无法重定向，我试了几次，日志文件都压根没动。crontab用于设置定时任务 参考：  linux crontab定时执行shell脚本crontab命令被用来提交和管理用户的需要周期性执行的任务，与windows下的计划任务类似，当安装完成 *** 作系统后，默认会安装此服务工具，并且会自动启动crond进程，crond进程每分钟会定期检查是否有要执行的任务，如果有要执行的任务，则自动执行该任务。 语法 　crontab(选项)(参数) 选项 　-e：编辑该用户的计时器设置； 　-l：列出该用户的计时器设置； 　-r：删除该用户的计时器设置； 　-u<用户名称>：指定要设定计时器的用户名称。 参数 　crontab文件：指定包含待执行任务的crontab文件。 首先crontab -e，就会进入vi编辑界面。然后直接把新的命令输进去就行了。minute hour day month week command /XXX/XXX.log 顺序：分 时 日 月 周minute： 表示分钟，可以是从0到59之间的任何整数。 hour：表示小时，可以是从0到23之间的任何整数。 day：表示日期，可以是从1到31之间的任何整数。 month：表示月份，可以是从1到12之间的任何整数。 week：表示星期几，可以是从0到7之间的任何整数，这里的0或7代表星期日。 /n表示每个n的单位执行一次 command：要执行的命令，可以是系统命令，也可以是自己编写的脚本文件。 意为每周的1：00执行，且输出重定向到黑洞目录。

---