百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

Python定时任务,三步实现自动化(三步走战略的第三步将提前多少年实现)

liuian 2025-07-02 22:18 20 浏览


今天的文章源自于工作中的一个小技巧,主要是涉及到日常工作的自动化处理。

如果说你每天都需要做一些重复的工作,比如出一份报告、统计一个数据、发一封邮件等等

那你完全可以把这个任务交给电脑让它每天自动替你完成,而你只需要从容地打开保温杯,静静地泡一杯枸杞

今天主要会用到Linux下的cron这个服务,ok,直接开始

1. 安装cron

基本上所有的Linux发行版在默认情况下都预安装了cron工具。

即使未预装cron,也很简单,执行几条简单的命令就可手动安装

# 检查是否已经预装了cron
service cron status

安装并启动服务

安装:apt-get install cron
启动/停止/重启:service cron start/stop/restart
查询当前任务:crontab -l

2. 安装检查

安装完成后检查一下是否安装成功,同样使用 status命令查看

出现如下提示表示安装成功:

另外,在ubuntu下可能会出现这样的提示:

这个也表示可以正常使用

3. cron用法

有几个关于cron的简单用法可以了解一下,后面也会通过一个案例详细介绍如何使用

首先,列出当前用户计划的cron作业:

crontab -l

查看其它用户的cron作业:

crontab –l –u username

移除已经计划的cron作业:

crontab –r

4. 调度crontab计划

首先,通过如下命令添加或更新crontab中的任务

第一次进入会要求你选择编辑器,这个根据自己的习惯选择。

选择好之后会进入到这样的一个界面:

用过vim的同学应该对这个界面不陌生,类似的操作:按A键开始编辑,按ESC输入wq保存并退出

重点是最下面的一段内容:

m h dom mon dow commmand

这个其实就是crontab调度作业的一个使用介绍,可以用来设置定时任务。

具体一点的语法是这样的:

m h dom mon dow command
* * * * * command
- - - - - -
| | | | | |
| | | | | --- 预执行的命令
| | | | ----- 表示星期0~7(其中星期天可以用0或7表示)
| | | ------- 表示月份1~12
| | --------- 表示日期1~31
| ----------- 表示小时1~23(0表示0点)
------------- 表示分钟1~59 每分钟用*或者 */1表示

举几个简单的应用案例:

  • 每天 02:00 执行任务
0 2 * * * command
  • 每天 5:00和17:00执行任务
0 5,17 * * * command
  • 每 10min 执行一次任务
*/10 * * * * command
  • 在特定的某几个月的周日 17:00 执行任务
0 17 * jan,may,aug sun command

差不多常用的就这些,更多的使用案例还可以参考这个链接:
http://linux.51yip.com/search/crontab

上面案例中的command 表示你具体需要执行的任务,例如打印一段话:

echo "Hello xiaoyi" >> /tmp/test.txt 

或者将这段话输出到txt中:

echo "Hello xiaoyi" >> /tmp/test.txt 

或者是你需要执行一个Python脚本:

python demo.py filepath

后面的filepath表示输入的参数args,这个可能有的同学会用到,例如下面的案例中需要输入文件下载路径。

5. 实战

上面的都搞清楚了,就可以开始今天的重头戏了。

首先我们需要每天从ftp服务器中下载最新的任务数据,将数据下载到本地后通过Python进行数据汇总统计,最后将结果存入数据库中,如果期间某个环节出现问题则发送告警邮件。

① Python脚本

首先需要Python脚本完成以下功能:

  • 从数据库中获取最新数据日期
  • 从ftp中下载最新数据到本地
  • 对本地最新数据进行汇总统计
  • 统计结果存入数据库汇总
  • 邮件通知

上面这个流程大致的伪代码是这样的:

if __name__ == '__main__':
    """获取最新数据日期"""
    latest_date = get_max_date()
    # 以最新日期为名创建文件夹
    download_dir = os.path.join(sys.argv[1], latest_date)
    if not os.path.exists(download_dir):
        os.makedirs(download_dir)
        
    """从ftp中下载最新数据"""
    download_file(latest_date, download_dir)
    """处理最新数据并保存"""
    process_data(latest_date, download_dir)

邮件监控可以在加一个try catch的异常捕获,有异常发生的时候则发送邮件

Python编辑邮件内容并发送以前也有写过,可以参考下面这个:Python邮件发送

②编写cron任务

打开crontab,编辑如下内容到最后一行,保存并退出

crontab是会自动实时更新任务列表的,如果不放心也可以通过restart命令重启cron 服务【参考文章开头】

这里有个小建议,所有的路径都填写绝对路径

③ 效果监控

如果Python代码没有问题,任务会定时执行。

这里建议可以把自己的command单独在控制台运行下,没有问题的时候再写进到cron任务列表红。

最终小一的定时任务运行截图如下:

最下面是ftp文件下载,上面是数据汇总统计

说点题外话

如果说你平时的工作有很多重复的任务,像日常指标的采集、取数汇总统计、邮件自动转发等等

一旦这些工作你可以通过脚本设置好逻辑,自动化任务也就可以实现它,最多就需要你每天注意一下邮件,看看有没有发生错误就行了。


喜欢的老板点个关注呦!

相关推荐

Spring Boot + Vue.js 实现前后端分离(附源码)

作者:梁小生0101链接:juejin.im/post/5c622fb5e51d457f9f2c2381SpringBoot+Vue.js前后端涉及基本概念介绍,搭建记录,本文会列举出用到环...

C#一步一步实现自己的插件框架(四),从此告别代码紧耦合

初学者写程序一般就是拖控件,双击,然后写上执行的代码,这样在窗口中就有很多事件代码,如果要实现各按钮的状态,那得在很多地方修改代码,极为复杂.通过参考CSHARPDEVELOP的代码就说明和网上各位...

基于UI组件的Vue可视化布局、快速生成.vue代码

一、项目简介基于UI组件的Vue可视化布局、快速生成.vue代码二、实现功能通用(文本、链接、换行、div、图片)支持elementUI支持iViewUI(button、icon、radio、sel...

【开源资讯】ViewUI 4.2.0(原 iView)发布,企业级 UI 组件库

简介iView作者Aresn于2019年创办了北京视图更新科技有限公司,开始自由、全职地维护iView及其相关的软件。ViewUI即为原先的iView,从2019年10月起...

Python GUI 编程入门教程 第25章:记账本应用升级—类别统计与图表

25.1项目目标在第24章的月份筛选功能基础上,新增:类别输入:记录时选择支出/收入类别,例如:餐饮、交通、购物、工资、理财等类别统计:计算选定月份的各类别总额类别图表:生成饼图,展示各类别所占...

Python GUI 编程入门教程 第8章:文件处理、数据库操作与网络通信

8.1文件操作:处理本地文件与文件对话框在Tkinter应用中,文件操作是常见的需求。Tkinter提供了简单的文件对话框来帮助用户选择文件,并能通过Python内建的文件处理模块来读取和写入文件。...

手把手教你用Python做个可视化的“剪刀石头布”小游戏

/1前言/最近在学习PyQt5可视化界面,这是一个内容非常丰富的gui库,相对于tkinter库,功能更加强大,界面更加美观,操作也不难。于是我开始小试牛刀,用PyQt5做个可视化的“剪刀石头布”...

掌握基础技能快速用Python设计界面

我们在设计软件界面的时候,应该掌握一定的基础知识,不能我们看起来非常费解也很累。到后面设计界面的时候,很多基础知识不可能如你开始学的时候讲的那样仔细。熟练掌握Python的基本语法,如变量、数据类型...

Python GUI 编程入门教程 第22章:综合实战项目——记账本应用

22.1项目目标我们要开发一个带数据库的记账本,主要功能:添加收支记录(日期、类别、金额、备注)显示所有记录(表格形式)支持删除记录自动保存到SQLite数据库统计总收支22.2项目结构budge...

Python GUI 编程入门教程 第10章:高级布局与界面美化

10.1高级布局管理:使用grid和placeTkinter提供了三种常用的布局管理方式:pack、grid和place。在本章中,我们重点介绍grid和place,这两种布局方式相较于pack更加...

别再手动复制粘贴了!Python一招搞定取PDF内容,效率提升10倍!

别再手动复制粘贴了!Python一招搞定取PDF内容,效率提升10倍!还在为PDF内容提取头疼?100页的文档要折腾一下午?今天教你用Python几行代码搞定,10秒钟解决战斗,办公室小白也能轻松学会...

DearPyGui:GUI 性能秒杀 PyQt,揭秘 GPU 加速的 DearPyGui

什么是DearPyGui?嘿,最近我发现了一个超有意思的PythonGUI框架——DearPyGui。名字有点拗口,但它可不是随便起的。它基于C++和GPU渲染,性能吊打传统的Tki...

Python GUI 编程入门教程 第7章:事件绑定、动画效果与外部交互

7.1事件绑定:响应用户操作在Tkinter中,事件绑定允许你为控件添加响应函数,以处理用户的输入事件,如鼠标点击、键盘输入等。事件可以是各种形式的交互,如点击按钮、键盘按键等。7.1.1绑定鼠标...

Python GUI 编程入门教程 第21章:综合实战项目——记事本应用

21.1项目目标我们要实现一个简易版的记事本,具备以下功能:新建、打开、保存文件复制、粘贴、剪切、全选设置字体大小查找文字显示应用信息界面大致效果如下:+----------------------...

Python GUI 编程入门教程 第14章:构建复杂图形界面

14.1界面布局管理在Tkinter中,界面控件的排列是通过布局管理器来实现的。Tkinter提供了三种布局管理器:pack、grid和place,每种布局管理器都有其独特的用途和优势。14.1.1...