美文网首页
爬虫定时爬取设置

爬虫定时爬取设置

作者: 程猿先生 | 来源:发表于2018-01-13 13:43 被阅读0次

    想要每天定时启动,最好是把程序放在服务器上运行,毕竟服务器可以不用关机,即定时任务一直存活

    #coding:utf8  
    import datetime  
    import time  
      
    def doSth():  
        # 把爬虫程序放在这个类里  
        print(u'这个程序要开始疯狂的运转啦')  
      
    # 一般网站都是1:00点更新数据,所以每天凌晨一点启动  
    def main(h=1,m=0):  
        while True:  
            now = datetime.datetime.now()  
            # print(now.hour, now.minute)  
            if now.hour == h and now.minute == m:  
                break  
            # 每隔60秒检测一次  
            time.sleep(60)  
        doSth()  
      
    main()  
    

    相关文章

      网友评论

          本文标题:爬虫定时爬取设置

          本文链接:https://www.haomeiwen.com/subject/eyscoxtx.html