python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
实例讲解Python中函数的调用与定义
Mar 14 Python
python用Pygal如何生成漂亮的SVG图像详解
Feb 10 Python
Python探索之修改Python搜索路径
Oct 25 Python
基于python中pygame模块的Linux下安装过程(详解)
Nov 09 Python
python向已存在的excel中新增表,不覆盖原数据的实例
May 02 Python
解决python给列表里添加字典时被最后一个覆盖的问题
Jan 21 Python
Python使用百度api做人脸对比的方法
Aug 28 Python
ansible-playbook实现自动部署KVM及安装python3的详细教程
May 11 Python
python 实现分组求和与分组累加求和代码
May 18 Python
Pytorch使用PIL和Numpy将单张图片转为Pytorch张量方式
May 25 Python
Python内置方法和属性应用:反射和单例(推荐)
Jun 19 Python
matplotlib阶梯图的实现(step())
Mar 02 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
让Json更懂中文(JSON_UNESCAPED_UNICODE)
2011/10/27 PHP
使用php批量删除数据库下所有前缀为prefix_的表
2014/06/09 PHP
深入理解php printf() 输出格式化的字符串
2016/05/23 PHP
phpStorm+XDebug+chrome 配置详解
2019/04/01 PHP
IE不出现Flash激活框的小发现的js实现方法
2007/09/07 Javascript
“不能执行已释放的Script代码”错误的原因及解决办法
2007/09/09 Javascript
jquery绑定原理 简单解析与实现代码分享
2011/09/06 Javascript
String.prototype实现的一些javascript函数介绍
2013/11/22 Javascript
js判断浏览器类型为ie6时不执行
2014/06/15 Javascript
jquery点击缩略图切换视频播放特效代码分享
2015/09/15 Javascript
JS原型对象的创建方法详解
2016/06/16 Javascript
总结Node.js中的一些错误类型
2016/08/15 Javascript
细说webpack源码之compile流程-入口函数run
2017/12/26 Javascript
Vue Element使用icon图标教程详解(第三方)
2018/02/07 Javascript
js中switch语句的学习笔记
2020/03/25 Javascript
小程序实现列表展开收起效果
2020/07/29 Javascript
[16:19]教你分分钟做大人——风暴之灵
2015/03/11 DOTA
python算法学习之基数排序实例
2013/12/18 Python
pygame学习笔记(4):声音控制
2015/04/15 Python
python使用PyGame播放Midi和Mp3文件的方法
2015/04/24 Python
Python 包含汉字的文件读写之每行末尾加上特定字符
2016/12/12 Python
python3使用smtplib实现发送邮件功能
2018/05/22 Python
Python3实现对列表按元组指定列进行排序的方法分析
2018/12/22 Python
在python 中实现运行多条shell命令
2019/01/07 Python
Python实现自定义读写分离代码实例
2019/11/16 Python
pycharm 2018 激活码及破解补丁激活方式
2020/09/21 Python
python接口自动化之ConfigParser配置文件的使用详解
2020/08/03 Python
python matplotlib工具栏源码探析二之添加、删除内置工具项的案例
2021/02/25 Python
澳大利亚小众服装品牌:Maurie & Eve
2018/03/27 全球购物
策划主管的工作职责
2013/11/24 职场文书
大学生自我鉴定
2013/12/16 职场文书
年会搞笑主持词
2014/03/27 职场文书
2014年人事专员工作总结
2014/11/19 职场文书
css布局巧妙技巧之css三角示例的运用
2022/03/16 HTML / CSS
Win11怎么跳过联网验机 ?Win11跳过联网验机激活教程
2022/04/05 数码科技
Python matplotlib安装以及实现简单曲线的绘制
2022/04/26 Python