【Linux】定时任务记录

Crontab 定时任务&后台执行和日志输出

例如：*/1 * * * * root /home/mysqlbak/mysql_backup.sh #每一分钟执行一次备份

一.  Crontab介绍

crontab命令的功能是在一定的时间间隔调度一些命令的执行。

1.1 /etc/crontab文件

在/etc目录下有一个crontab文件，这里存放有系统运行的一些调度程序。每个用户可以建立自己的调度crontab。

如：

[root@dave ~]# cat /etc/crontab

SHELL=/bin/bash

PATH=/sbin:/bin:/usr/sbin:/usr/bin

MAILTO=root

HOME=/

# run-parts

01 * * * * root run-parts /etc/cron.hourly

02 4 * * * root run-parts /etc/cron.daily

22 4 * * 0 root run-parts /etc/cron.weekly

42 4 1 * * root run-parts /etc/cron.monthly

1.2 /etc/cron.deny和/etc/cron.allow文件

/etc/cron.deny 表示不能使用crontab 命令的用户

/etc/cron.allow 表示能使用crontab的用户。

如果两个文件同时存在，那么/etc/cron.allow 优先。

如果两个文件都不存在，那么只有超级用户可以安排作业。

每个用户都会生成一个自己的crontab文件。这些文件在/var/spool/cron目录下：

如：

[root@dave ~]# cd /var/spool/cron

[root@dave cron]# ls

oracle  root

我们直接查看这个文件，里面的内容和对应用户显示的crontab -l一致。

[root@dave cron]# cat oracle

00 6 * * * /u02/scripts/del_st_archive.sh >/u02/scripts/del_st_arch.log 2>&1

[root@dave cron]# cat root

0 12 * * * /root/bin/sync-clock.sh

[root@dave cron]#

二.  Crontab使用说明

2.1Crontab语法

usage:  crontab [-u user] file

crontab [-u user] [ -e | -l | -r ]

(default operation is replace, per 1003.2)

-e      (edit user's crontab)

-l      (list user's crontab)

-r      (delete user's crontab)

-i      (prompt before deleting user's crontab)

-s      (selinux context)

其中，file是命令文件的名字。如果在命令行中指定了这个文件，那么执行crontab命令，则将这个文件拷贝到crontabs目录下；如果在命令行中没有制定这个文件，crontab命令将接受标准输入(键盘)上键入的命令，并将他们也存放在crontab目录下。

帮助：

[root@dave ~]# man crontab

2.2  Crontab格式说明

2.2.1 通用格式

我们可以用crontab -e 添加要执行的命令。 命令执行的结果，无论是标准输出还是错误输出，都将以邮件形式发给用户。

添加的命令必须以如下格式：

* * * * * /command path

前五个字段可以取整数值，指定何时开始工作，第六个域是字符串，即命令字段，其中包括了crontab调度执行的命令。 各个字段之间用spaces和tabs分割。

前5个字段分别表示：

分钟：0-59

小时：1-23

日期：1-31

月份：1-12

星期：0-6(0表示周日)

还可以用一些特殊符号：

*： 表示任何时刻

,：　表示分割

－：表示一个段，如第二端里： 1-5，就表示1到5点

/n : 表示每个n的单位执行一次，如第二段里，*/1, 就表示每隔1个小时执行一次命令。也可以写成1-23/1.

一些示例：

00 8,12,16 * * * /data/app/scripts/monitor/df.sh

30 2 * * * /data/app/scripts/hotbackup/hot_database_backup.sh

10 8,12,16 * * * /data/app/scripts/monitor/check_ind_unusable.sh

10 8,12,16 * * * /data/app/scripts/monitor/check_maxfilesize.sh

10 8,12,16 * * * /data/app/scripts/monitor/check_objectsize.sh

43 21 * * * 21:43 执行

15 05 * * * 　　 05:15 执行

0 17 * * * 17:00 执行

0 17 * * 1 每周一的 17:00 执行

0,10 17 * * 0,2,3 每周日,周二,周三的 17:00和 17:10 执行

0-10 17 1 * * 毎月1日从 17:00到7:10 毎隔1分钟 执行

0 0 1,15 * 1 毎月1日和 15日和 一日的 0:00 执行

42 4 1 * * 　 　 毎月1日的 4:42分 执行

0 21 * * 1-6　　 周一到周六 21:00 执行

0,10,20,30,40,50 * * * *　每隔10分 执行

*/10 * * * * 　　　　　　 每隔10分 执行

* 1 * * *　　　　　　　　 从1:0到1:59 每隔1分钟 执行

0 1 * * *　　　　　　　　 1:00 执行

0 */1 * * *　　　　　　　 毎时0分 每隔1小时 执行

0 * * * *　　　　　　　　 毎时0分 每隔1小时 执行

2 8-20/3 * * *　　　　　　8:02,11:02,14:02,17:02,20:02 执行

30 5 1,15 * *　　　　　　 1日 和 15日的 5:30 执行

2.2.2 特殊定义格式(根据项目使用框架)

本系统cron表达式支持5(或者6)个域，分别是：

分 是 0-59

时 是 0-23

日 是 1-31

月 是 1-12

周 是 1-7

年 可空  或 默认1970-2099

常用特殊字符： ， / - -1    (还有一些特殊字符和quartz cron相同，可参照)

逗号 (,) 是用来在给某个域上指定一个值列表的。例如，使用值 0,15,30,45 在分域上意味着每15秒触发一个 trigger(0分，15分…触发)，表达式样例： 0,15,30,45 -1 -1 -1 -1  意义：每刻钟触发一次trigger；

斜杠 (/) 是用于时间表的递增的。我们刚刚用了逗号来表示每15分钟的递增，但是我们也能写成这样 0/15。表达式样例： 15 0/2 -1 -1 -1  意义：从15分开始，没两个小时触发trigger；

中划线 (-) 用于指定一个范围。例如，在小时域上的 3-8 意味着 "3,4,5,6,7 和 8 点。"  域的值不允许回卷，所以像 50-10 这样的值是不允许的。表达式样例： 03-8 0/5 -1 -1 -1  意义：每隔5天的3：00到8：00触发trigger；

负一 (-1) 指示着你想在这个域上包含所有合法的值。例如，在月份域上使用负一意味着每个月都会触发这个 trigger。表达式样例： 0 -1 17 -1-1  意义：每个月17号凌晨00：00开始触发trigger。

2.3  & 后台执行命令

当在前台运行某个作业时，终端被该作业占据；而在后台运行作业时，它不会占据终端。可以使用&命令把作业放到后台执行。

如：

30 2 * * * /data/app/scripts/hotbackup/hot_database_backup.sh &

在后台运行作业时要当心：需要用户交互的命令不要放在后台执行，因为这样你的机器就会在那里傻等。

不过，作业在后台运行一样会将结果输出到屏幕上，干扰你的工作。如果放在后台运行的作业会产生大量的输出，最好使用下面的方法把它的输出重定向到某个文件中：

如：

command >out.file 2>&1 &

在这个例子中，2>&1表示所有的标准输出和错误输出都将被重定向到一个叫做out.file 的文件中。

2.4  2>&1 含义

先看一个例子：

0 2 * * * /u01/test.sh >/dev/null 2>&1 &

这句话的意思就是在后台执行这条命令，并将错误输出2重定向到标准输出1，然后将标准输出1全部放到/dev/null 文件，也就是清空。

在这里有有几个数字的意思：

0表示键盘输入

1表示标准输出

2表示错误输出.

我们也可以这样写：

0 2 * * * /u01/test.sh  >/u01/out.file &  --这里没写，默认是1

0 2 * * * /u01/test.sh  1>/u01/out.file &

0 2 * * * /u01/test.sh  2>/u01/out.file &

0 2 * * * /u01/test.sh  2>/u01/out.file  2>&1 &

将tesh.sh 命令输出重定向到out.file, 即输出内容不打印到屏幕上，而是输出到out.file文件中。

2>&1 是将错误输出重定向到标准输出。 然后将标准输入重定向到文件out.file。

&1 表示的是文件描述1，表示标准输出，如果这里少了&就成了数字1，就表示重定向到文件1。

& ：后台执行

测试：

ls 2>1 ： 不会报没有2文件的错误，但会输出一个空的文件1；

ls xxx 2>1： 没有xxx这个文件的错误输出到了1中；

ls xxx 2>&1： 不会生成1这个文件了，不过错误跑到标准输出了；

ls xxx >out.txt 2>&1 == ls xxx 1>out.txt 2>&1；  因为重定向符号>默认是1，这句就把错误输出和标准输出都传到out.txt文件中。

2.5  2>&1写在后面的原因

格式：command > file 2>&1   == command  1> file 2>&1

首先是command > file将标准输出重定向到file中， 2>&1 是标准错误拷贝了标准输出，也就是同样被重定向到file中，最终结果就是标准输出和错误都被重定向到file中。

如果改成： command 2>&1 >file

2>&1 标准错误拷贝了标准输出的行为，但此时标准输出还是在终端。>file 后输出才被重定向到file，但标准错误仍然保持在终端。

附：写在后面是不要在终端输出，但是如果有需求执行的时候在终端可以看日志，如果日志比较多的话通过日志文件去定位，所以不是一定要写在后面

2.6 nohup(no hang up)

Unix/Linux下一般比如想让某个程序在后台运行，很多都是使用 & 在程序结尾来让程序自动运行。比如我们要运行mysql在后台：

/usr/local/mysql/bin/mysqld_safe --user=mysql &

但是加入我们很多程序并不象mysqld一样做成守护进程，可能我们的程序只是普通程序而已，一般这种程序使用 & 结尾，但是如果终端关闭，那么程序也会被关闭。但是为了能够后台运行，那么我们就可以使用nohup这个命令，比如我们有个test.php需要在后台运行，并且希望在后台能够定期运行，那么就使用nohup：

后台运行：　nohup run.sh nohup.out &

查看实时打印信息：tail -f nohup.out

提示：

[~]$ appending output to nohup.out

嗯，证明运行成功，同时把程序运行的输出信息放到当前目录的 nohup.out 文件中去。

附：nohup命令参考

nohup 命令

用途：不挂断地运行命令。

语法：nohup Command [ Arg ... ] [　& ]

描述：nohup 命令运行由 Command 参数和任何相关的 Arg 参数指定的命令，忽略所有挂断(SIGHUP)信号。在注销后使用 nohup 命令运行后台中的程序。要运行后台中的 nohup 命令，添加 & ( 表示“and”的符号)到命令的尾部。

无论是否将 nohup 命令的输出重定向到终端，输出都将附加到当前目录的 nohup.out 文件中。如果当前目录的 nohup.out 文件不可写，输出重定向到 $HOME/nohup.out 文件中。如果没有文件能创建或打开以用于追加，那么 Command 参数指定的命令不可调用。如果标准错误是一个终端，那么把指定的命令写给标准错误的所有输出作为标准输出重定向到相同的文件描述符。

退出状态：该命令返回下列出口值：

126 可以查找但不能调用 Command 参数指定的命令。

127 nohup 命令发生错误或不能查找由 Command 参数指定的命令。

否则，nohup 命令的退出状态是 Command 参数指定命令的退出状态。

nohup命令及其输出文件

nohup命令：如果你正在运行一个进程，而且你觉得在退出帐户时该进程还不会结束，那么可以使用nohup命令。该命令可以在你退出帐户/关闭终端之后继续运行相应的进程。nohup就是不挂起的意思( n ohang up)。

该命令的一般形式为：nohup command &

使用nohup命令提交作业

如果使用nohup命令提交作业，那么在缺省情况下该作业的所有输出都被重定向到一个名为nohup.out的文件中，除非另外指定了输出文件：

nohup command > myout.file 2>&1 &

在上面的例子中，输出被重定向到myout.file文件中。

使用 jobs 查看任务。

使用 fg %n　关闭。

2.7 Cronolog日志分割

cronolog安装配置非常简单，下载后只需要输入几个命令即可完成。

1、下载(最新版本)

#  wget http://cronolog.org/download/cronolog-1.6.2.tar.gz

2、解压缩

# tar zxvf cronolog-1.6.2.tar.gz

3、进入cronolog安装文件所在目录

# cd cronolog-1.6.2

4、运行安装

# ./configure

# make

# make install

5、查看cronolog安装后所在目录(验证安装是否成功)

一般情况下显示为：/usr/local/sbin/cronolog

6、使用方法

usage: cronolog [OPTIONS] logfile-spec

例：command   2>&1  |   /usr/local/sbin/cronolog   /www/logs/error_%Y%m%d.log

通过2>&1使在终端显示的同时也可以通过cronolog   写到分割日志中，这里用日期来分割。