python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python 过滤字符串的技巧,map与itertools.imap
Sep 06 Python
python 中文乱码问题深入分析
Mar 13 Python
python单线程实现多个定时器示例
Mar 30 Python
python网络编程学习笔记(三):socket网络服务器
Jun 09 Python
python使用os.listdir和os.walk获得文件的路径的方法
Dec 16 Python
python在非root权限下的安装方法
Jan 23 Python
Python获取当前脚本文件夹(Script)的绝对路径方法代码
Aug 27 Python
python实现图像拼接
Mar 05 Python
Python Django2 model 查询介绍(条件、范围、模糊查询)
Mar 16 Python
Python基于paramunittest模块实现excl参数化
Apr 26 Python
Python 可视化神器Plotly详解
Dec 26 Python
 Python 中 logging 模块使用详情
Mar 03 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
php 引用(&)详解
2009/11/20 PHP
WordPress主题制作中自定义头部的相关PHP函数解析
2016/01/08 PHP
基于PHP实现解密或加密Cloudflar邮箱保护
2020/06/24 PHP
用javascript编写的第一人称射击游戏
2007/02/25 Javascript
JavaScript 用cloneNode方法克隆节点的代码
2012/10/15 Javascript
简单几行JS Code实现IE邮件转发新浪微博
2013/07/03 Javascript
图片动画横条广告带上下滚动的JS代码
2013/10/25 Javascript
javascript验证身份证完全方法具体实现
2013/11/18 Javascript
js实现分享到随页面滚动而滑动效果的方法
2015/04/10 Javascript
简介JavaScript中strike()方法的使用
2015/06/08 Javascript
jquery实现可点击伸缩与展开的菜单效果代码
2015/08/31 Javascript
Javascript中的Prototype到底是什么
2016/02/16 Javascript
AngularJs  Using $location详解及示例代码
2016/09/02 Javascript
原生Aajax 和jQuery Ajax 写法个人总结
2017/03/24 jQuery
bootstrap fileinput组件整合Springmvc上传图片到本地磁盘
2017/05/11 Javascript
小程序实现列表多个批量倒计时
2021/01/29 Javascript
angularjs实现table表格td单元格单击变输入框/可编辑状态示例
2019/02/21 Javascript
详解JSON和JSONP劫持以及解决方法
2019/03/08 Javascript
JavaScript面向对象程序设计中对象的定义和继承详解
2019/07/29 Javascript
JS实现商城秒杀倒计时功能(动态设置秒杀时间)
2019/12/12 Javascript
python局部赋值的规则
2013/03/07 Python
详细介绍Python语言中的按位运算符
2013/11/26 Python
python模拟登录并且保持cookie的方法详解
2017/04/04 Python
利用Python查看目录中的文件示例详解
2017/08/28 Python
matplotlib设置legend图例代码示例
2017/12/19 Python
python的pip安装以及使用教程
2018/09/18 Python
Python+OpenCV感兴趣区域ROI提取方法
2019/01/10 Python
python实现爬山算法的思路详解
2019/04/09 Python
如何利用pygame实现简单的五子棋游戏
2019/12/29 Python
详解python变量与数据类型
2020/08/25 Python
Hotels.com拉丁美洲:从豪华酒店到经济型酒店的预定优惠和折扣
2019/12/09 全球购物
求职简历的自我评价
2014/01/31 职场文书
《桂林山水》教学反思
2014/02/08 职场文书
环保建议书
2014/03/12 职场文书
监察局领导班子四风问题整改措施思想汇报
2014/10/05 职场文书
JS setTimeout与setInterval的区别
2022/04/20 Javascript