python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python解析xml文件实例分享
Dec 04 Python
python处理PHP数组文本文件实例
Sep 18 Python
用Python的Flask框架结合MySQL写一个内存监控程序
Nov 07 Python
详解python3中socket套接字的编码问题解决
Jul 01 Python
python字典快速保存于读取的方法
Mar 23 Python
python实现键盘控制鼠标移动
Nov 27 Python
Python实现中值滤波去噪方式
Dec 18 Python
使用python批量转换文件编码为UTF-8的实现
Apr 03 Python
基于Python把网站域名解析成ip地址
May 25 Python
Python实现我的世界小游戏源代码
Mar 02 Python
Python基础学习之奇异的GUI对话框
May 27 Python
python装饰器代码解析
Mar 23 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
使用 eAccelerator加速PHP代码的方法
2007/09/30 PHP
php HandlerSocket的使用
2011/05/02 PHP
通过php修改xml文档内容的方法
2015/01/23 PHP
php版阿里云OSS图片上传类详解
2016/12/01 PHP
有关PHP 中 config.m4 的探索
2020/08/26 PHP
JavaScript基本对象
2007/01/11 Javascript
javascript 面向对象继承
2009/11/26 Javascript
jQuery.ajax 用户登录验证代码
2010/10/29 Javascript
window.location.reload 刷新使用分析(去对话框)
2015/11/11 Javascript
jQuery增加与删除table列的方法
2016/03/01 Javascript
JavaScript每天必学之事件
2016/09/18 Javascript
vue.js动画中的js钩子函数的实现
2018/07/06 Javascript
element上传组件循环引用及简单时间倒计时的实现
2018/10/01 Javascript
Vue+Express实现登录状态权限验证的示例代码
2019/05/05 Javascript
Vue过渡效果之CSS过渡详解(结合transition,animation,animate.css)
2020/02/05 Javascript
Vue项目接入Paypal实现示例详解
2020/06/04 Javascript
Python进程通信之匿名管道实例讲解
2015/04/11 Python
python爬虫之模拟登陆csdn的实例代码
2018/05/18 Python
对python中数组的del,remove,pop区别详解
2018/11/07 Python
利用Python+阿里云实现DDNS动态域名解析的方法
2019/04/01 Python
Python实现在Windows平台修改文件属性
2020/03/05 Python
新手学python应该下哪个版本
2020/06/11 Python
Python实现快速大文件比较代码解析
2020/09/04 Python
以实惠的价格提供高品质的时尚:Newchic
2018/01/18 全球购物
德国最大的网上足球商店:11teamsports
2019/09/11 全球购物
在阿联酋购买翻新手机和平板电脑:Teckzu
2021/02/12 全球购物
铭立家具面试题
2012/12/06 面试题
工程项目经理岗位职责
2013/12/15 职场文书
小学新学期教师寄语
2014/01/18 职场文书
教师求职信
2014/06/17 职场文书
小学假期安全广播稿
2014/09/28 职场文书
语文教师个人工作总结
2015/02/06 职场文书
人力资源部岗位职责
2015/02/11 职场文书
军训新闻稿范文
2015/07/17 职场文书
2016年大学生社区服务活动总结
2016/04/06 职场文书
详解Python+OpenCV绘制灰度直方图
2022/03/22 Python