python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python sys模块sys.path使用方法示例
Dec 04 Python
python中map、any、all函数用法分析
Apr 21 Python
Python实现TCP协议下的端口映射功能的脚本程序示例
Jun 14 Python
python使用筛选法计算小于给定数字的所有素数
Mar 19 Python
对python添加模块路径的三种方法总结
Oct 16 Python
深入解析Python小白学习【操作列表】
Mar 23 Python
Python面向对象程序设计类的多态用法详解
Apr 12 Python
Python matplotlib修改默认字体的操作
Mar 05 Python
Python3 中sorted() 函数的用法
Mar 24 Python
详解Tensorflow不同版本要求与CUDA及CUDNN版本对应关系
Aug 04 Python
python定时截屏实现
Nov 02 Python
七个非常实用的Python工具包总结
Jun 15 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
百事可乐也出咖啡了 双倍咖啡因双倍快乐
2021/03/03 咖啡文化
深入PHP中的HashTable结构详解
2013/06/13 PHP
PHP循环输出指定目录下的所有文件和文件夹路径例子(简单实用)
2014/05/10 PHP
PHP下的Oracle客户端扩展(OCI8)安装教程
2014/09/10 PHP
php接口数据加密、解密、验证签名
2015/03/12 PHP
jQuery 性能优化指南(3)
2009/05/21 Javascript
jquery 批量上传图片实现代码
2010/01/28 Javascript
jQuery UI 应用不同Theme的办法
2010/09/12 Javascript
新发现一个骗链接的方法(js读取cookies)
2012/01/11 Javascript
jQuery中html()方法用法实例
2014/12/25 Javascript
阻止表单提交按钮多次提交的完美解决方法
2016/05/16 Javascript
仅一个form表单 js实现注册信息依次填写提交功能
2016/06/12 Javascript
解析JavaScript中的字符串类型与字符编码支持
2016/06/24 Javascript
将鼠标焦点定位到文本框最后(代码分享)
2017/01/11 Javascript
NodeJS 中Stream 的基本使用
2018/07/30 NodeJs
boostrap模态框二次弹出清空原有内容的方法
2018/08/10 Javascript
Vue.js子组件向父组件通信的方法实例代码详解
2018/12/10 Javascript
JS基于ES6新特性async await进行异步处理操作示例
2019/02/02 Javascript
Python遍历目录的4种方法实例介绍
2015/04/13 Python
在Python的一段程序中如何使用多次事件循环详解
2017/09/07 Python
Python cookbook(数据结构与算法)通过公共键对字典列表排序算法示例
2018/03/15 Python
python中验证码连通域分割的方法详解
2018/06/04 Python
python 使用cx-freeze打包程序的实现
2020/03/14 Python
Python MOCK SERVER moco模拟接口测试过程解析
2020/04/13 Python
Oasis服装官网:时尚女装在线
2020/07/09 全球购物
介绍一下write命令
2012/09/24 面试题
物业管理大学生个人的自我评价
2013/10/10 职场文书
自我评价优秀范文分享
2013/11/30 职场文书
拾金不昧表扬信范文
2014/01/11 职场文书
大学生军训感想
2014/02/16 职场文书
融资租赁计划书
2014/04/29 职场文书
纪念九一八事变演讲稿:牢记历史,捍卫主权
2014/09/14 职场文书
2015年节能降耗工作总结
2015/05/22 职场文书
2015年小学教导处工作总结
2015/05/26 职场文书
POST提交数据常见的四种方式
2022/01/18 HTML / CSS
游戏《铁拳》动画化!2022年年内播出
2022/03/21 日漫