python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python实现的监测服务器硬盘使用率脚本分享
Nov 07 Python
python抽象基类用法实例分析
Jun 04 Python
django传值给模板, 再用JS接收并进行操作的实例
May 28 Python
python 中字典嵌套列表的方法
Jul 03 Python
python实现Dijkstra静态寻路算法
Jan 17 Python
jupyter notebook 中输出pyecharts图实例
Apr 23 Python
python3中pip3安装出错,找不到SSL的解决方式
Dec 12 Python
tensorflow estimator 使用hook实现finetune方式
Jan 21 Python
tensorflow mnist 数据加载实现并画图效果
Feb 05 Python
基于jupyter代码无法在pycharm中运行的解决方法
Apr 21 Python
解决pytorch 数据类型报错的问题
Mar 03 Python
python自动化之如何利用allure生成测试报告
May 02 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
PHP实现懒加载的方法
2015/03/07 PHP
php 数组随机取值的简单实例
2016/05/23 PHP
thinkPHP多表查询及分页功能实现方法示例
2017/07/03 PHP
深入分析PHP设计模式
2020/06/15 PHP
javascript在myeclipse中报错的解决方法
2013/10/29 Javascript
JavaScript返回网页中锚点数目的方法
2015/04/03 Javascript
javascript中递归函数用法注意点
2015/07/30 Javascript
黑帽seo劫持程序,js劫持搜索引擎代码
2015/09/15 Javascript
js倒计时抢购实例
2015/12/20 Javascript
jQuery前端开发35个小技巧
2016/05/24 Javascript
jquery.form.js框架实现文件上传功能案例解析(springmvc)
2016/05/26 Javascript
jquery mobile界面数据刷新的实现方法
2016/05/28 Javascript
AngularJS全局警告框实现方法示例
2017/05/18 Javascript
VueJS 组件参数名命名与组件属性转化问题
2018/12/03 Javascript
浅谈bootstrap layer.open中end的使用方法
2019/09/12 Javascript
nodejs对mongodb数据库的增加修删该查实例代码
2020/01/05 NodeJs
python&MongoDB爬取图书馆借阅记录
2016/02/05 Python
Python中的__slots__示例详解
2017/07/06 Python
python石头剪刀布小游戏(三局两胜制)
2021/01/20 Python
python获取交互式ssh shell的方法
2019/02/14 Python
anaconda如何查看并管理python环境
2019/07/05 Python
Django中的FBV和CBV用法详解
2019/09/15 Python
python实现两个字典合并,两个list合并
2019/12/02 Python
Python项目跨域问题解决方案
2020/06/22 Python
关于HTML5你必须知道的28个新特性,新技巧以及新技术
2012/05/28 HTML / CSS
英国顶级家庭折扣店:The Works
2017/09/06 全球购物
Linux内核产生并发的原因
2012/07/13 面试题
新学期班主任寄语
2014/01/18 职场文书
茶叶店创业计划书范文
2014/01/19 职场文书
新闻学专业大学生职业生涯规划范文
2014/03/02 职场文书
新春寄语大全
2014/04/09 职场文书
创建绿色学校先进个人材料
2014/08/20 职场文书
2015年“7.11”世界人口日宣传活动方案
2015/05/06 职场文书
盗窃案辩护词
2015/05/21 职场文书
2016年九九重阳节活动总结
2016/04/01 职场文书
MySQL 分组查询的优化方法
2021/05/12 MySQL