美文网首页
爬虫三步

爬虫三步

作者: 江湖有爱 | 来源:发表于2019-04-24 21:54 被阅读0次
#创建目录文件夹
new_flie = '动态图'
if not os.path.exists(new_flie):
    os.mkdir(new_flie)
#关键三步:获取页面,获取关键信息,下载保存
def getHtml():#请求页面
    html = requests.get(url)
def getImg():#获取图片
    html = requests.get(url)#打开页面
   #使用正则或xpath获取图片信息
def download(filename,img):#下载保存
    try:
        i = requests.get(img, timeout=(3, 7))
        with open('./' + new_flie + '/{}'.format(filename), 'wb') as f:
            f.write(i.content)
            f.close()
            print(filename)
    except:
        print('error','URL打不开',img)

相关文章

网友评论

      本文标题:爬虫三步

      本文链接:https://www.haomeiwen.com/subject/zhongqtx.html