百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

一文详解 Linux Crontab 调度任务

liuian 2024-12-01 00:59 26 浏览

最近接到这样一个任务: 定期(每天、每月)向“特定服务器”传输“软件服务”的运营数据,因此这里涉及到一个定时任务,计划使用Python语言添加Crontab依赖写一个定时任务的脚本,实现每天、每月向服务器上传运营数据。
这篇文章是我在实现以上需求过程中,对于Crontab的使用总结。

  • Crontab 概述
  • Crontab 环境搭建
  • Crontab 使用案例(Python)
  • Crontab 使用详解
  • Crontab 操作命令行(Linux)

一、Crontab 概述

Linux环境中,Crontab是一个调度守护进程,可以按分钟、小时、每月的某天、每月、每周的某天来执行特定任务,这些特定的任务被称为 Cron 作业,基于这个特点,Crontab 经常被用于自动执行系统维护与管理
例如:可以使用 Crontab 来自动执行一些重复性的工作,比如定期发送邮件、备份数据库、备份软件运行数据、下载最近的软件补丁等等。

Crontab 文件:

在 Linux 环境中,当我们使用Crontab命令创建cron 作业后,系统中会生成一个 Crontab 文本文件,用于指定 cron 作业的时间表

  • 在基于 Red Hat 的发行版系统,如 CentOS,crontab 该文件的存储在/var/spool/cron/目录下;
  • Debian 、Ubuntu等系统中,该文件存储在/var/spool/cron/crontabs/目录下。

如下所示/var/spool/cron/目录下的Crontab文件:

注:
虽然我们了解到了 Crontab 的文件路径,但并不建议手动编辑该文件,官方推荐在终端使用crontab命令操作该文件。

二、Crontab 环境搭建

当然在正式介绍环境搭建之前,先向朋友们汇报一下我的虚拟机环境与使用的Python版本。
我使用的虚拟机环境为
CentOS 7


Python版本为
Python 3.11.1

  • Centos 安装 cronie
  • Python 安装 python-crontab 依赖

2.1 Centos 安装 cronie

在Linux中使用Crontab之前,需要先确保安装了Crontab,安装命令如下:

# Centos 安装 cronie
yum install cronie
# 查看 Crontab 任务
crontab -l

Centos 7安装 Crontab:

2.2 Python 安装 python-crontab

在Python中使用 crontab ,还需要下载其对应的依赖包,下载安装方式如下:

# 安装Crontab
pip3 install python-crontab

Python 安装 Crontab 依赖:

若安装过程中遇到SSH支持问题相关的错误提醒,可更换如下方式进行安装:

# 安装Pycrypto:(豆瓣源)
pip3 install python-crontab -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com

三、Python中使用Crontab

Crontab 在 Python中的使用相对简单,我们采用如下方式创建定时任务。


from crontab import CronTab  
  
# 创建linux系统当前用户的crontab(当然也可以创建其他用户的,但需要对应的权限,如:user='root')  
my_user_cron = CronTab(user=True)  
# ~~~~~每日任务~~~~~  
# 创建任务(指定绝对路径)  
daily_job = my_user_cron.new(  
    command='python3 /home/workspace/Python3ForSftpjy5g/sftp_daily.py >> /home/workspace/Python3ForSftpjy5g/assets/output/log_crontab.txt')  
# "每天凌晨2点" 执行一次 sftp_daily.py  
daily_job.setall('0 2 * * *')  
# ~~~~~每月任务~~~~~  
# 创建任务(指定绝对路径)  
monthly_job = my_user_cron.new(  
    command='python3 /home/workspace/Python3ForSftpjy5g/sftp_monthly.py >> /home/workspace/Python3ForSftpjy5g/assets/output/log_crontab.txt')  
# "每月1日凌晨2点" 执行一次 sftp_monthly.py  
monthly_job.setall('0 2 1 * *')  
# 将crontab写入linux系统配置文件  
my_user_cron.write()  
  
# 命令行输入:python3 crontab_job.py 执行该py脚本,则定时任务设定完毕!  
# 此刻在Linux终端 输入 contrab -l 可查看所有定时任务。

四、Crontab 使用详解

在crontab文件与crontab命令中,每一行都包含由空格分隔的5个字段,其后跟要执行的定时任务。

4.1 crontab五个字段含义

这里举了几个简单的例子,帮助大家理解这五个字段的含义:

0 * * * *   # 每小时(整点)执行一次
0 1 * * *   # 每天凌晨1点执行一次
0 1 * * 0   # 每周星期日凌晨1点执行一次
0 1 1 * *   # 每月1号1点执行一次
0 1 1 1 *   # 每年1月1日1点执行一次

4.2 分隔与连字符用法

crontab的五个字段可能包含一个或多个值字段内由逗号分隔或由连字符分隔

  • * 星号运算符表示任何值或始终:
    如果您在 Hour 字段中有星号符号,则表示该任务将每小时执行一次。
  • , 逗号运算符允许指定要重复的值的列表:
    例如,如果1,3,5设置在“小时”字段中,任务将在凌晨1点、凌晨3点、凌晨 5点执行。
  • -连字符运算符允许指定一个值范围:
    入力,如果1-5设置在“星期”字段中,任务将从星期一到星期五运行。
  • /斜杠运算符允许指定将在它们之间的特定间隔内重复的值。
    例如,如果*/4设置在“小时”字段中,则表示该操作将每四个小时执行一次;其与0,4,8,12,16,20的设定含义相同。

这里举了几个简单的例子,帮助大家理解分隔与连字符用法:

*/5 * * * *    # 每5分钟执行一次
0 8-16 * * *   # 每天从上午8点到下午4点整点执行一次
0 15 * * 1-5   # 周一到周五每天15:00执行一次
0 3 1,15 * *   # 每个月1号、15号凌晨3点执行一次

五、Linux Crontab 命令行

Linux Crontab 命令行简述如下:

  • crontab -e 编辑 crontab 文件,如果不存在则创建一个。
  • crontab -l 显示 crontab 文件内容。
  • crontab -r 删除当前的 crontab 文件。
  • crontab -i 删除您当前的 crontab 文件,并在删除前提示。

相关推荐

2023年最新微信小程序抓包教程(微信小程序 抓包)

声明:本公众号大部分文章来自作者日常学习笔记,部分文章经作者授权及其他公众号白名单转载。未经授权严禁转载。如需转载,请联系开百。请不要利用文章中的相关技术从事非法测试。由此产生的任何不良后果与文...

测试人员必看的软件测试面试文档(软件测试面试怎么说)

前言又到了毕业季,我们将会迎来许多需要面试的小伙伴,在这里呢笔者给从事软件测试的小伙伴准备了一份顶级的面试文档。1、什么是bug?bug由哪些字段(要素)组成?1)将在电脑系统或程序中,隐藏着的...

复活,视频号一键下载,有手就会,长期更新(2023-12-21)

视频号下载的话题,也算是流量密码了。但也是比较麻烦的问题,频频失效不说,使用方法也难以入手。今天,奶酪就来讲讲视频号下载的新方案,更关键的是,它们有手就会有用,最后一个方法万能。实测2023-12-...

新款HTTP代理抓包工具Proxyman(界面美观、功能强大)

不论是普通的前后端开发人员,还是做爬虫、逆向的爬虫工程师和安全逆向工程,必不可少会使用的一种工具就是HTTP抓包工具。说到抓包工具,脱口而出的肯定是浏览器F12开发者调试界面、Charles(青花瓷)...

使用Charles工具对手机进行HTTPS抓包

本次用到的工具:Charles、雷电模拟器。比较常用的抓包工具有fiddler和Charles,今天讲Charles如何对手机端的HTTS包进行抓包。fiddler抓包工具不做讲解,网上有很多fidd...

苹果手机下载 TikTok 旧版本安装包教程

目前苹果手机能在国内免拔卡使用的TikTok版本只有21.1.0版本,而AppStore是高于21.1.0版本,本次教程就是解决如何下载TikTok旧版本安装包。前期准备准备美区...

【0基础学爬虫】爬虫基础之抓包工具的使用

大数据时代,各行各业对数据采集的需求日益增多,网络爬虫的运用也更为广泛,越来越多的人开始学习网络爬虫这项技术,K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章,为实现从易到难全方位覆盖,特设【0基础学爬...

防止应用调试分析IP被扫描加固实战教程

防止应用调试分析IP被扫描加固实战教程一、概述在当今数字化时代,应用程序的安全性已成为开发者关注的焦点。特别是在应用调试过程中,保护应用的网络安全显得尤为重要。为了防止应用调试过程中IP被扫描和潜在的...

一文了解 Telerik Test Studio 测试神器

1.简介TelerikTestStudio(以下称TestStudio)是一个易于使用的自动化测试工具,可用于Web、WPF应用的界面功能测试,也可以用于API测试,以及负载和性能测试。Te...

HLS实战之Wireshark抓包分析(wireshark抓包总结)

0.引言Wireshark(前称Ethereal)是一个网络封包分析软件。网络封包分析软件的功能是撷取网络封包,并尽可能显示出最为详细的网络封包资料。Wireshark使用WinPCAP作为接口,直接...

信息安全之HTTPS协议详解(加密方式、证书原理、中间人攻击 )

HTTPS协议详解(加密方式、证书原理、中间人攻击)HTTPS协议的加密方式有哪些?HTTPS证书的原理是什么?如何防止中间人攻击?一:HTTPS基本介绍:1.HTTPS是什么:HTTPS也是一个...

Fiddler 怎么抓取手机APP:抖音、小程序、小红书数据接口

使用Fiddler抓取移动应用程序(APP)的数据接口需要进行以下步骤:首先,确保手机与计算机连接在同一网络下。在计算机上安装Fiddler工具,并打开它。将手机的代理设置为Fiddler代理。具体方...

python爬虫教程:教你通过 Fiddler 进行手机抓包

今天要说说怎么在我们的手机抓包有时候我们想对请求的数据或者响应的数据进行篡改怎么做呢?我们经常在用的手机手机里面的数据怎么对它抓包呢?那么...接下来就是学习python的正确姿势我们要用到一款强...

Fiddler入门教程全家桶,建议收藏

学习Fiddler工具之前,我们先了解一下Fiddler工具的特点,Fiddler能做什么?如何使用Fidder捕获数据包、修改请求、模拟客户端向服务端发送请求、实施越权的安全性测试等相关知识。本章节...

fiddler如何抓取https请求实现手机抓包(100%成功解决)

一、HTTP协议和HTTPS协议。(1)HTTPS协议=HTTP协议+SSL协议,默认端口:443(2)HTTP协议(HyperTextTransferProtocol):超文本传输协议。默认...