python 定时任务系统_Python定时任务,实现自动化的方法
python教程栏目介绍实现自动化的方法。
1. 安装cron
基本上所有的Linux发行版在默认情况下都预安装了cron工具。
即使未预装cron,也很简单,执行几条简单的命令就可手动安装# 检查是否已经预装了cron
service cron status复制代码
安装并启动服务安装:apt-get install cron
启动/停止/重启:service cron start/stop/restart
查询当前任务:crontab -l复制代码
2. 安装检查
安装完成后检查一下是否安装成功,同样使用 status命令查看
出现如下提示表示安装成功:
另外,在ubuntu下可能会出现这样的提示:
这个也表示可以正常使用
3. cron用法
有几个关于cron的简单用法可以了解一下,后面也会通过一个案例详细介绍如何使用
首先,列出当前用户计划的cron作业:crontab -l复制代码
查看其它用户的cron作业:crontab –l –u username复制代码
移除已经计划的cron作业:crontab –r复制代码
4. 调度crontab计划
首先,通过如下命令添加或更新crontab中的任务
第一次进入会要求你选择编辑器,这个根据自己的习惯选择。
选择好之后会进入到这样的一个界面:
用过vim的同学应该对这个界面不陌生,类似的操作:按A键开始编辑,按ESC输入wq保存并退出
重点是最下面的一段内容:m h dom mon dow commmand复制代码
这个其实就是crontab调度作业的一个使用介绍,可以用来设置定时任务。
具体一点的语法是这样的:m h dom mon dow command
* * * * * command
- - - - - -
| | | | | |
| | | | | --- 预执行的命令
| | | | ----- 表示星期0~7(其中星期天可以用0或7表示)
| | | ------- 表示月份1~12
| | --------- 表示日期1~31
| ----------- 表示小时1~23(0表示0点)
------------- 表示分钟1~59 每分钟用*或者 */1表示复制代码
举几个简单的应用案例:每天 02:00 执行任务0 2 * * * command复制代码每天 5:00和17:00执行任务0 5,17 * * * command复制代码每 10min 执行一次任务*/10 * * * * command复制代码在特定的某几个月的周日 17:00 执行任务0 17 * jan,may,aug sun command复制代码
差不多常用的就这些,更多的使用案例还可以参考这个链接:http://linux.51yip.com/search/crontab
上面案例中的command 表示你具体需要执行的任务,例如打印一段话:echo "Hello xiaoyi" >> /tmp/test.txt
复制代码
或者将这段话输出到txt中:echo "Hello xiaoyi" >> /tmp/test.txt
复制代码
或者是你需要执行一个Python脚本:python demo.py filepath复制代码
后面的filepath表示输入的参数args,这个可能有的同学会用到,例如下面的案例中需要输入文件下载路径。
5. 实战
上面的都搞清楚了,就可以开始今天的重头戏了。
首先我们需要每天从ftp服务器中下载最新的任务数据,将数据下载到本地后通过Python进行数据汇总统计,最后将结果存入数据库中,如果期间某个环节出现问题则发送告警邮件。
① Python脚本
首先需要Python脚本完成以下功能:从数据库中获取最新数据日期
从ftp中下载最新数据到本地
对本地最新数据进行汇总统计
统计结果存入数据库汇总
邮件通知
上面这个流程大致的伪代码是这样的:if __name__ == '__main__': """获取最新数据日期"""
latest_date = get_max_date() # 以最新日期为名创建文件夹
download_dir = os.path.join(sys.argv[1], latest_date) if not os.path.exists(download_dir):
os.makedirs(download_dir)
"""从ftp中下载最新数据"""
download_file(latest_date, download_dir) """处理最新数据并保存"""
process_data(latest_date, download_dir)复制代码
邮件监控可以在加一个try catch的异常捕获,有异常发生的时候则发送邮件
Python编辑邮件内容并发送以前也有写过,可以参考下面这个:Python邮件发送
②编写cron任务
打开crontab,编辑如下内容到最后一行,保存并退出
crontab是会自动实时更新任务列表的,如果不放心也可以通过restart命令重启cron 服务【参考文章开头】
这里有个小建议,所有的路径都填写绝对路径
③ 效果监控
如果Python代码没有问题,任务会定时执行。
这里建议可以把自己的command单独在控制台运行下,没有问题的时候再写进到cron任务列表红。
最终小一的定时任务运行截图如下:最下面是ftp文件下载,上面是数据汇总统计
相关免费学习推荐:python教程(视频)
python 定时任务系统_Python定时任务,实现自动化的方法相关推荐
- python color属性_Python中类的属性、方法及内置方法
1.类的属性成员变量 对象的创建创建对象的过程称之为实例化,当一个对象被创建后,包含三个方面的特性对象聚丙属性和方法, 句柄用于区分不同的对象, 对象的属性和方法,与类中的成员变量和成员函数对应, o ...
- python 连通区域_python skimage 连通性区域检测方法
python skimage 连通性区域检测方法 涉及到的函数为 import matplotlib.pyplot as plt from skimage import measure, color ...
- python schedule多线程_Python定时任务sched模块用法示例
本文实例讲述了Python定时任务sched模块用法.分享给大家供大家参考,具体如下: 通过sched模块可以实现通过自定义时间,自定义函数,自定义优先级来执行函数. 范例一 import time ...
- python 定时执行_python定时执行任务 轻量级
python 中有一个轻量级的定时任务调度的库:schedule.他可以完成每分钟,每小时,每天,周几,特定日期的定时任务.因此十分方便我们执行一些轻量级的定时任务. 代码如下:1 import sc ...
- python定时爬虫_python 每天如何定时启动爬虫任务(实现方法分享)
python2.7环境下运行 安装相关模块 想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活: #coding:utf8 import date ...
- python 控制库_python中实现自动化控制pyautogui库使用方法介绍
大家在使用电脑中,有时候需要电脑进行一些繁锁的程序化操作.Python中有一个第三方库,能够帮助大家实现自动化控制电脑完成指定任务.这个库叫pyautogui库.今天,咿哑呀就简单地教大家怎样使用这个 ...
- python变量定义问题_python 定义n个变量方法 (变量声明自动化)
python 定义n个变量方法 (变量声明自动化) code: for i in range(100): cmd = "t%s = 1" % i exec cmd eval(&qu ...
- python定时关机_python 实现定时关机(windows,python3)
[实例简介] [实例截图] [核心代码] import os import time from datetime import datetime def close_job1(times): prin ...
- python 配置文件对比_Python运维自动化之nginx配置文件对比操作示例
{"moduleinfo":{"card_count":[{"count_phone":1,"count":1}],&q ...
最新文章
- Spring+Hibernate项目在weblogic中部署的一些问题
- c语言编制编程语言,C语言CGI编程入门(一)
- pythonui教学视频_分享软件开发相关视频教程(Java、C++、Python、UI设计、HTML5、iOS)...
- Datawhale MySQL 训练营 Task2 查询语句
- 的生物合成方式主要包括_J EXP BOT 综述| 植物次级代谢产物在调控微生物组组分及功能中的作用...
- [HNOI2012]三角形覆盖问题
- HDU2151 Worm【DP】
- python没基础能自学吗-python自学没有基础会不会不好学?
- 聚类分析二:DBSCAN算法
- CSS简介和CSS选择器
- apple id 如何注册来啦?(亲测流程)
- abb机器人编程指令写字_ABB机器人编程基本知识汇总
- “变速齿轮”研究手记
- win10修改dns服务器地址,教你Win10如何更改首选DNS服务器地址
- Linux系统GPU压力测试
- SpringBoot线程池实现200w数据快速落库
- python基础教程-第1章节 基础知识
- 怎么把ppt弄成链接的形式_ppt链接excle表格:如何在ppt中超级链接到指定的excel工作表...
- 网页游戏封包辅助技术
- 世界首台手持式3D智能扫描仪Artec Leo亮相CES Asia
热门文章
- RS-485中继器的多种使用方法
- 【渝粤题库】陕西师范大学151210 成本会计作业 (专升本)
- 边缘计算、雾计算、云计算区别几何?
- 7 Statistical estimation
- 国计算机学会聘为全国青少年信,中国计算机学会将继续开展NOI相关活动,暂未作出重新申报的决议...
- electronjs MySQL,javascript – 在Electron应用程序中使用sql.js.
- 四川对口高职本科学校计算机,2018四川对口高职本科学校有哪些
- php node 目录,node.js基于fs模块对系统文件及目录进行读写操作的方法详解
- C++一天一个程序(五)
- 安卓手机背景变黑色怎么改_别着急扔掉旧手机 你的电脑可能需要它