python 每天如何定时启动爬虫任务(实现方法分享)


Posted in Python onMay 21, 2018

python2.7环境下运行

安装相关模块

想要每天定时启动,最好是把程序放在linux服务器上运行,毕竟linux可以不用关机,即定时任务一直存活;

#coding:utf8
import datetime
import time
def doSth():
 # 把爬虫程序放在这个类里
 print(u'这个程序要开始疯狂的运转啦')
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动
def main(h=1,m=0):
 while True:
  now = datetime.datetime.now()
  # print(now.hour, now.minute)
  if now.hour == h and now.minute == m:
   break
  # 每隔60秒检测一次
  time.sleep(60)
 doSth()
main()

以上这篇python 每天如何定时启动爬虫任务(实现方法分享)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
在Python中使用Neo4j数据库的教程
Apr 16 Python
python基础教程之Filter使用方法
Jan 17 Python
解决python文件字符串转列表时遇到空行的问题
Jul 09 Python
Python字典及字典基本操作方法详解
Jan 30 Python
pytorch torch.expand和torch.repeat的区别详解
Nov 05 Python
Django app配置多个数据库代码实例
Dec 17 Python
Python控制台输出时刷新当前行内容而不是输出新行的实现
Feb 21 Python
Python实现文件压缩和解压的示例代码
Aug 12 Python
matplotlib制作雷达图报错ValueError的实现
Jan 05 Python
在pyCharm中下载第三方库的方法
Apr 18 Python
超级详细实用的pycharm常用快捷键
May 12 Python
据Python爬虫不靠谱预测可知今年双十一销售额将超过6000亿元
Nov 11 Python
对python抓取需要登录网站数据的方法详解
May 21 #Python
深入浅析python 中的匿名函数
May 21 #Python
python3 selenium 切换窗口的几种方法小结
May 21 #Python
python selenium 对浏览器标签页进行关闭和切换的方法
May 21 #Python
pytorch cnn 识别手写的字实现自建图片数据
May 20 #Python
pytorch 把MNIST数据集转换成图片和txt的方法
May 20 #Python
Python安装lz4-0.10.1遇到的坑
May 20 #Python
You might like
PHP产生不重复随机数的5个方法总结
2014/11/12 PHP
Thinkphp自定义代码生成工具及用法说明(附下载地址)
2016/05/27 PHP
PHP读书笔记整理_结构语句详解
2016/07/01 PHP
php提高脚本性能的4个技巧
2020/08/18 PHP
jCallout 轻松实现气泡提示功能
2013/09/22 Javascript
js中精确计算加法和减法示例
2014/03/28 Javascript
javascript感应鼠标图片透明度显示的方法
2015/02/24 Javascript
JS通过ajax动态读取xml文件内容的方法
2015/03/24 Javascript
基于jQuery Circlr插件实现产品图片360度旋转
2015/09/20 Javascript
分享JavaScript与Java中MD5使用两个例子
2015/12/23 Javascript
JavaScript中Window对象的属性及事件
2015/12/25 Javascript
jQuery+canvas实现简单的球体斜抛及颜色动态变换效果
2016/01/28 Javascript
Bootstrap学习笔记之进度条、媒体对象实例详解
2017/03/09 Javascript
Mac系统下Webstorm快捷键整理大全
2017/05/28 Javascript
js Dom实现换肤效果
2017/10/21 Javascript
Angular实现下拉框模糊查询功能示例
2018/01/03 Javascript
详解组件库的webpack构建速度优化
2018/06/18 Javascript
Javascript执行流程细节原理解析
2020/05/14 Javascript
微信小程序自定义yPicker组件实现省市区三级联动功能
2020/10/29 Javascript
解决element-ui的下拉框有值却无法选中的情况
2020/11/07 Javascript
JS addEventListener()和attachEvent()方法实现注册事件
2021/01/11 Javascript
[02:42]2014DOTA2国际邀请赛 三冰专访:我会打到Ti20
2014/07/13 DOTA
[05:59]带你看看DPC的台前幕后
2021/03/11 DOTA
进一步了解Python中的XML 工具
2015/04/13 Python
Python与Redis的连接教程
2015/04/22 Python
Python探索之自定义实现线程池
2017/10/27 Python
Python处理文本换行符实例代码
2018/02/03 Python
python版DDOS攻击脚本
2019/06/12 Python
Python3使用PySynth制作音乐的方法
2019/09/09 Python
python Canny边缘检测算法的实现
2020/04/24 Python
Keras中 ImageDataGenerator函数的参数用法
2020/07/03 Python
解决TensorFlow调用Keras库函数存在的问题
2020/07/06 Python
美国批发供应商:Kole Imports
2019/04/10 全球购物
小区门卫的岗位职责
2014/09/26 职场文书
委托公证书格式
2015/01/26 职场文书
预备党员入党感言
2015/08/01 职场文书