百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

一文详解 Linux Crontab 调度任务

liuian 2024-12-01 00:59 40 浏览

最近接到这样一个任务: 定期(每天、每月)向“特定服务器”传输“软件服务”的运营数据,因此这里涉及到一个定时任务,计划使用Python语言添加Crontab依赖写一个定时任务的脚本,实现每天、每月向服务器上传运营数据。
这篇文章是我在实现以上需求过程中,对于Crontab的使用总结。

  • Crontab 概述
  • Crontab 环境搭建
  • Crontab 使用案例(Python)
  • Crontab 使用详解
  • Crontab 操作命令行(Linux)

一、Crontab 概述

Linux环境中,Crontab是一个调度守护进程,可以按分钟、小时、每月的某天、每月、每周的某天来执行特定任务,这些特定的任务被称为 Cron 作业,基于这个特点,Crontab 经常被用于自动执行系统维护与管理
例如:可以使用 Crontab 来自动执行一些重复性的工作,比如定期发送邮件、备份数据库、备份软件运行数据、下载最近的软件补丁等等。

Crontab 文件:

在 Linux 环境中,当我们使用Crontab命令创建cron 作业后,系统中会生成一个 Crontab 文本文件,用于指定 cron 作业的时间表

  • 在基于 Red Hat 的发行版系统,如 CentOS,crontab 该文件的存储在/var/spool/cron/目录下;
  • Debian 、Ubuntu等系统中,该文件存储在/var/spool/cron/crontabs/目录下。

如下所示/var/spool/cron/目录下的Crontab文件:

注:
虽然我们了解到了 Crontab 的文件路径,但并不建议手动编辑该文件,官方推荐在终端使用crontab命令操作该文件。

二、Crontab 环境搭建

当然在正式介绍环境搭建之前,先向朋友们汇报一下我的虚拟机环境与使用的Python版本。
我使用的虚拟机环境为
CentOS 7


Python版本为
Python 3.11.1

  • Centos 安装 cronie
  • Python 安装 python-crontab 依赖

2.1 Centos 安装 cronie

在Linux中使用Crontab之前,需要先确保安装了Crontab,安装命令如下:

# Centos 安装 cronie
yum install cronie
# 查看 Crontab 任务
crontab -l

Centos 7安装 Crontab:

2.2 Python 安装 python-crontab

在Python中使用 crontab ,还需要下载其对应的依赖包,下载安装方式如下:

# 安装Crontab
pip3 install python-crontab

Python 安装 Crontab 依赖:

若安装过程中遇到SSH支持问题相关的错误提醒,可更换如下方式进行安装:

# 安装Pycrypto:(豆瓣源)
pip3 install python-crontab -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com

三、Python中使用Crontab

Crontab 在 Python中的使用相对简单,我们采用如下方式创建定时任务。


from crontab import CronTab  
  
# 创建linux系统当前用户的crontab(当然也可以创建其他用户的,但需要对应的权限,如:user='root')  
my_user_cron = CronTab(user=True)  
# ~~~~~每日任务~~~~~  
# 创建任务(指定绝对路径)  
daily_job = my_user_cron.new(  
    command='python3 /home/workspace/Python3ForSftpjy5g/sftp_daily.py >> /home/workspace/Python3ForSftpjy5g/assets/output/log_crontab.txt')  
# "每天凌晨2点" 执行一次 sftp_daily.py  
daily_job.setall('0 2 * * *')  
# ~~~~~每月任务~~~~~  
# 创建任务(指定绝对路径)  
monthly_job = my_user_cron.new(  
    command='python3 /home/workspace/Python3ForSftpjy5g/sftp_monthly.py >> /home/workspace/Python3ForSftpjy5g/assets/output/log_crontab.txt')  
# "每月1日凌晨2点" 执行一次 sftp_monthly.py  
monthly_job.setall('0 2 1 * *')  
# 将crontab写入linux系统配置文件  
my_user_cron.write()  
  
# 命令行输入:python3 crontab_job.py 执行该py脚本,则定时任务设定完毕!  
# 此刻在Linux终端 输入 contrab -l 可查看所有定时任务。

四、Crontab 使用详解

在crontab文件与crontab命令中,每一行都包含由空格分隔的5个字段,其后跟要执行的定时任务。

4.1 crontab五个字段含义

这里举了几个简单的例子,帮助大家理解这五个字段的含义:

0 * * * *   # 每小时(整点)执行一次
0 1 * * *   # 每天凌晨1点执行一次
0 1 * * 0   # 每周星期日凌晨1点执行一次
0 1 1 * *   # 每月1号1点执行一次
0 1 1 1 *   # 每年1月1日1点执行一次

4.2 分隔与连字符用法

crontab的五个字段可能包含一个或多个值字段内由逗号分隔或由连字符分隔

  • * 星号运算符表示任何值或始终:
    如果您在 Hour 字段中有星号符号,则表示该任务将每小时执行一次。
  • , 逗号运算符允许指定要重复的值的列表:
    例如,如果1,3,5设置在“小时”字段中,任务将在凌晨1点、凌晨3点、凌晨 5点执行。
  • -连字符运算符允许指定一个值范围:
    入力,如果1-5设置在“星期”字段中,任务将从星期一到星期五运行。
  • /斜杠运算符允许指定将在它们之间的特定间隔内重复的值。
    例如,如果*/4设置在“小时”字段中,则表示该操作将每四个小时执行一次;其与0,4,8,12,16,20的设定含义相同。

这里举了几个简单的例子,帮助大家理解分隔与连字符用法:

*/5 * * * *    # 每5分钟执行一次
0 8-16 * * *   # 每天从上午8点到下午4点整点执行一次
0 15 * * 1-5   # 周一到周五每天15:00执行一次
0 3 1,15 * *   # 每个月1号、15号凌晨3点执行一次

五、Linux Crontab 命令行

Linux Crontab 命令行简述如下:

  • crontab -e 编辑 crontab 文件,如果不存在则创建一个。
  • crontab -l 显示 crontab 文件内容。
  • crontab -r 删除当前的 crontab 文件。
  • crontab -i 删除您当前的 crontab 文件,并在删除前提示。

相关推荐

Python生态下的微服务框架FastAPI

FastAPI是什么FastAPI是一个用于构建API的web框架,使用Python并基于标准的Python类型提示。与flask相比有什么优势高性能:得益于uvloop,可达到与...

SpringBoot:如何解决跨域问题,详细方案和示例代码

跨域问题在前端开发中经常会遇到,特别是在使用SpringBoot框架进行后端开发时。解决跨域问题的方法有很多,我将为你提供一种详细的方案,包含示例代码。首先,让我们了解一下什么是跨域问题。跨域是指在...

使用Nginx轻松搞定跨域问题_使用nginx轻松搞定跨域问题的方法

跨域问题(Cross-OriginResourceSharing,简称CORS)是由浏览器的同源策略引起的。同源策略指的是浏览器限制来自不同源(协议、域名、端口)的JavaScript对资源的...

spring boot过滤器与拦截器的区别

有小伙伴使用springboot开发多年,但是对于过滤器和拦截器的主要区别依然傻傻分不清。今天就对这两个概念做一个全面的盘点。定义与作用范围过滤器(Filter):过滤器是一种可以动态地拦截、处理和...

nginx如何配置跨域_nginx配置跨域访问

要在Nginx中配置跨域,可以使用add_header指令来添加Access-Control-Allow-*头信息,如下所示:location/api{if($reques...

解决跨域问题的8种方法,含网关、Nginx和SpringBoot~

跨域问题是浏览器为了保护用户的信息安全,实施了同源策略(Same-OriginPolicy),即只允许页面请求同源(相同协议、域名和端口)的资源,当JavaScript发起的请求跨越了同源策略,...

图解CORS_图解数学

CORS的全称是Cross-originresourcesharing,中文名称是跨域资源共享,是一种让受限资源能够被其他域名的页面访问的一种机制。下图描述了CORS机制。一、源(Orig...

CORS 幕后实际工作原理_cors的工作原理

跨域资源共享(CORS)是Web浏览器实施的一项重要安全机制,用于保护用户免受潜在恶意脚本的攻击。然而,这也是开发人员(尤其是Web开发新手)感到沮丧的常见原因。小编在此将向大家解释它存在...

群晖无法拉取Docker镜像?最稳定的方法:搭建自己的加速服务!

因为未知的原因,国内的各大DockerHub镜像服务器无法使用,导致在使用群晖时无法拉取镜像构建容器。网上大部分的镜像加速服务都是通过Cloudflare(CF)搭建的,为什么都选它呢?因为...

Sa-Token v1.42.0 发布,新增 API Key、TOTP 验证码等能力

Sa-Token是一款免费、开源的轻量级Java权限认证框架,主要解决:登录认证、权限认证、单点登录、OAuth2.0、微服务网关鉴权等一系列权限相关问题。目前最新版本v1.42.0已...

NGINX常规CORS错误解决方案_nginx配置cors

CORS错误CORS(Cross-OriginResourceSharing,跨源资源共享)是一种机制,它使用额外的HTTP头部来告诉浏览器允许一个网页运行的脚本从不同于它自身来源的服务器上请求资...

Spring Boot跨域问题终极解决方案:3种方案彻底告别CORS错误

引言"接口调不通?前端同事又双叒叕在吼跨域了!""明明Postman能通,浏览器却报OPTIONS403?""生产环境跨域配置突然失效,凌晨3点被夺命连环Ca...

SpringBoot 项目处理跨域的四种技巧

上周帮一家公司优化代码时,顺手把跨域的问题解决了,这篇文章,我们聊聊SpringBoot项目处理跨域的四种技巧。1什么是跨域我们先看下一个典型的网站的地址:同源是指:协议、域名、端口号完全相...

Spring Cloud入门看这一篇就够了_spring cloud使用教程

SpringCloud微服务架构演进单体架构垂直拆分分布式SOA面向服务架构微服务架构服务调用方式:RPC,早期的webservice,现在热门的dubbo,都是RPC的典型代表HTTP,HttpCl...

前端程序员:如何用javascript开发一款在线IDE?

前言3年前在AWSre:Invent大会上AWS宣布推出Cloud9,用于在云端编写、运行和调试代码,它可以直接运行在浏览器中,也就是传说中的WebIDE。3年后的今天随着国内云计算的发...