python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python获取beautifulphoto随机某图片代码实例
Dec 18 Python
Python3中内置类型bytes和str用法及byte和string之间各种编码转换 问题
Sep 27 Python
python中dir()与__dict__属性的区别浅析
Dec 10 Python
Python3 pip3 list 出现 DEPRECATION 警告的解决方法
Feb 16 Python
python3.6使用tkinter实现弹跳小球游戏
May 09 Python
PyCharm 创建指定版本的 Django(超详图解教程)
Jun 18 Python
python内存管理机制原理详解
Aug 12 Python
Python logging设置和logger解析
Aug 28 Python
python批量将excel内容进行翻译写入功能
Oct 10 Python
Pycharm的Available Packages为空的解决方法
Sep 18 Python
celery在python爬虫中定时操作实例讲解
Nov 27 Python
Python基于argparse与ConfigParser库进行入参解析与ini parser
Feb 02 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
在windows iis5下安装php4.0+mysql之我见
2006/10/09 PHP
php正则过滤html标签、空格、换行符的代码(附说明)
2010/10/25 PHP
PHP递归复制、移动目录的自定义函数分享
2014/11/18 PHP
ioncube_loader_win_5.2.dll的错误解决方法
2015/01/04 PHP
CodeIgniter配置之config.php用法实例分析
2016/01/19 PHP
PHP微信公众号自动发送红包API
2016/06/01 PHP
laravel 解决crontab不执行的问题
2019/10/22 PHP
为你的 Laravel 验证器加上多验证场景的实现
2020/04/07 PHP
JavaScript 仿关机效果的图片层
2008/12/26 Javascript
javascript tips提示框组件实现代码
2010/11/19 Javascript
JS 打印功能代码可实现打印预览、打印设置等
2014/10/31 Javascript
jQuery制作简洁的多级联动Select下拉框
2014/12/23 Javascript
Javascript之面向对象--封装
2016/12/02 Javascript
javascript十六进制数字和ASCII字符之间的转换方法
2016/12/27 Javascript
js实现拖拽元素选择和删除
2020/08/25 Javascript
[00:32]2018DOTA2亚洲邀请赛Secret出场
2018/04/03 DOTA
Python实现遍历数据库并获取key的值
2015/05/17 Python
Python画图学习入门教程
2016/07/01 Python
Python模拟用户登录验证
2017/09/11 Python
python中open函数的基本用法示例
2019/09/07 Python
Python实现二叉树的最小深度的两种方法
2019/09/30 Python
css3的动画特效之动画序列(animation)
2017/12/22 HTML / CSS
可能这些是你想要的H5软键盘兼容方案(小结)
2019/04/23 HTML / CSS
总经理办公室主任岗位职责
2013/11/12 职场文书
物流专业求职计划书
2014/01/10 职场文书
预备党员思想汇报范文
2014/01/11 职场文书
面包店的创业计划书范文
2014/01/16 职场文书
护士医德考评自我评价
2015/03/03 职场文书
2015年社区纪检工作总结
2015/04/21 职场文书
宝宝满月宴答谢词
2015/09/30 职场文书
2016大学先进团支部事迹材料
2016/03/01 职场文书
PostGIS的安装与入门使用指南
2022/01/18 PostgreSQL
解决redis批量删除key值的问题
2022/03/23 Redis
微信小程序调用python模型
2022/04/21 Python
mysql 子查询的使用
2022/04/28 MySQL
Tomcat配置访问日志和线程数
2022/05/06 Servers