美文网首页
爬虫定时爬取设置

爬虫定时爬取设置

作者: 程猿先生 | 来源:发表于2018-01-13 13:43 被阅读0次

想要每天定时启动,最好是把程序放在服务器上运行,毕竟服务器可以不用关机,即定时任务一直存活

#coding:utf8  
import datetime  
import time  
  
def doSth():  
    # 把爬虫程序放在这个类里  
    print(u'这个程序要开始疯狂的运转啦')  
  
# 一般网站都是1:00点更新数据,所以每天凌晨一点启动  
def main(h=1,m=0):  
    while True:  
        now = datetime.datetime.now()  
        # print(now.hour, now.minute)  
        if now.hour == h and now.minute == m:  
            break  
        # 每隔60秒检测一次  
        time.sleep(60)  
    doSth()  
  
main()  

相关文章

网友评论

      本文标题:爬虫定时爬取设置

      本文链接:https://www.haomeiwen.com/subject/eyscoxtx.html