python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python Web开发模板引擎优缺点总结
May 06 Python
python实现定制交互式命令行的方法
Jul 03 Python
python实现在windows下操作word的方法
Apr 28 Python
Python2中文处理纪要的实现方法
Mar 10 Python
python中int与str互转方法
Jul 02 Python
python+opencv边缘提取与各函数参数解析
Mar 09 Python
python如何判断IP地址合法性
Apr 05 Python
解决python调用自己文件函数/执行函数找不到包问题
Jun 01 Python
python能开发游戏吗
Jun 11 Python
Selenium webdriver添加cookie实现过程详解
Aug 12 Python
python 中的9个实用技巧,助你提高开发效率
Aug 30 Python
Python用户自定义异常的实现
Dec 25 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
php面向对象全攻略 (十六) 对象的串行化
2009/09/30 PHP
php显示时间常用方法小结
2015/06/05 PHP
ThinkPHP框架实现的微信支付接口开发完整示例
2019/04/10 PHP
js中设置元素class的三种方法小结
2011/08/28 Javascript
jquery each的几种常用的使用方法示例
2014/01/21 Javascript
jquery 无限级下拉菜单的简单实现代码
2014/02/21 Javascript
js实现3D图片逐张轮播幻灯片特效代码分享
2015/09/09 Javascript
轻松学习Javascript闭包函数
2015/12/15 Javascript
jQuery ready()和onload的加载耗时分析
2016/09/08 Javascript
Ztree新增角色和编辑角色回显问题的解决
2016/10/25 Javascript
解析利用javascript如何判断一个数为素数
2016/12/08 Javascript
JS中定位 position 的使用实例代码
2017/08/06 Javascript
js数组方法reduce经典用法代码分享
2018/01/07 Javascript
Vue2.0子同级组件之间数据交互方法
2018/02/28 Javascript
vue基于mint-ui实现城市选择三级联动
2020/06/30 Javascript
js最实用string(字符串)类型的使用及截取与拼接详解
2019/04/26 Javascript
[05:05]给小松五分钟系列 第二期介绍为什么打DOTA2
2014/07/02 DOTA
[05:41]2014DOTA2西雅图国际邀请赛 小组赛7月10日TOPPLAY
2014/07/10 DOTA
[07:55]2014DOTA2 TI正赛第三日 VG上演推进荣耀DKEG告别
2014/07/21 DOTA
[01:06:54]DOTA2-DPC中国联赛 正赛 SAG vs DLG BO3 第二场 2月28日
2021/03/11 DOTA
使用Python编写简单的画图板程序的示例教程
2015/12/08 Python
python中string模块各属性以及函数的用法介绍
2016/05/30 Python
Windows 8.1 64bit下搭建 Scrapy 0.22 环境
2018/11/18 Python
python 执行文件时额外参数获取的实例
2018/12/18 Python
浅谈Tensorflow加载Vgg预训练模型的几个注意事项
2020/05/26 Python
Adobe Html5 Extension开发初体验图文教程
2017/11/14 HTML / CSS
美国百年历史早餐食品供应商:Wolferman’s
2017/01/18 全球购物
全球销量第一生发产品:Viviscal
2017/12/21 全球购物
列车长先进事迹材料
2014/01/25 职场文书
机械制造毕业生求职信
2014/03/03 职场文书
总经理助理岗位职责范本
2014/07/20 职场文书
2016师德师风学习心得体会
2016/01/12 职场文书
SpringBoot整合Mybatis Generator自动生成代码
2021/08/23 Java/Android
mysql中整数数据类型tinyint详解
2021/12/06 MySQL
如何利用React实现图片识别App
2022/02/18 Javascript
使用Nginx+Tomcat实现负载均衡的全过程
2022/05/30 Servers