python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python2.x和3.x下maketrans与translate函数使用上的不同
Apr 13 Python
python使用Image处理图片常用技巧分析
Jun 01 Python
你真的了解Python的random模块吗?
Dec 12 Python
浅谈numpy库的常用基本操作方法
Jan 09 Python
Python中垃圾回收和del语句详解
Nov 15 Python
python实现flappy bird游戏
Dec 24 Python
Python将视频或者动态图gif逐帧保存为图片的方法
Sep 10 Python
python中_del_还原数据的方法
Dec 09 Python
python 日志模块logging的使用场景及示例
Jan 04 Python
pytorch中index_select()的用法详解
Jan 06 Python
python实现求纯色彩图像的边框
Apr 08 Python
解决Python中的modf()函数取小数部分不准确问题
May 28 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
PHP跨平台获取服务器IP地址自定义函数分享
2014/12/29 PHP
PHP实现的迪科斯彻(Dijkstra)最短路径算法实例
2017/09/16 PHP
网页自动刷新,不产生嗒嗒声的一个解决方法
2007/03/27 Javascript
XML的代替者----JSON
2007/07/21 Javascript
javascript下4个跨浏览器必备的函数
2010/03/07 Javascript
boxy基于jquery的弹出层对话框插件扩展应用 弹出层选择器
2010/11/21 Javascript
超轻量级的基于jquery的三级展开列表
2011/04/26 Javascript
javascript淡入淡出效果的实现思路
2012/03/31 Javascript
js实现杯子倒水问题自动求解程序
2013/03/25 Javascript
jquery中radio checked问题
2015/03/16 Javascript
javaScript中Math()函数注意事项
2015/06/18 Javascript
javascript封装的sqlite操作类实例
2015/07/17 Javascript
详解maxlength属性在textarea里奇怪的表现
2015/12/27 Javascript
jQuery实现按钮点击遮罩加载及处理完后恢复的效果
2016/06/07 Javascript
第八篇Bootstrap下拉菜单实例代码
2016/06/21 Javascript
用Vue.js实现监听属性的变化
2016/11/17 Javascript
Node.js开发教程之基于OnceIO框架实现文件上传和验证功能
2016/11/30 Javascript
Vue+jquery实现表格指定列的文字收缩的示例代码
2018/01/09 jQuery
nodejs之koa2请求示例(GET,POST)
2018/08/07 NodeJs
通过javascript实现段落的收缩与展开
2019/06/26 Javascript
基于javascript实现贪吃蛇小游戏
2019/11/25 Javascript
vue循环中点击选中再点击取消(单选)的实现
2020/09/10 Javascript
[01:13:46]iG vs Winstrike 2018国际邀请赛小组赛BO2 第一场 8.16
2018/08/17 DOTA
c++生成dll使用python调用dll的方法
2014/01/20 Python
python3简单实现微信爬虫
2015/04/09 Python
python实现支持目录FTP上传下载文件的方法
2015/06/03 Python
python解压TAR文件至指定文件夹的实例
2019/06/10 Python
Python绘制频率分布直方图的示例
2019/07/08 Python
python des,aes,rsa加解密的实现
2021/01/16 Python
python 对xml解析的示例
2021/02/27 Python
ANINE BING官方网站:奢华的衣橱基本款和时尚永恒的单品
2019/11/26 全球购物
小学中等生评语
2014/12/29 职场文书
八年级英语教学反思
2016/02/15 职场文书
DIV CSS实现网页背景半透明效果
2021/12/06 HTML / CSS
Python Pygame实战在打砖块游戏的实现
2022/03/17 Python
java开发双人五子棋游戏
2022/05/06 Java/Android