美文网首页程序员人工智能时代(AI)
0110编程-Python的Requests的图片抓取和代理使用

0110编程-Python的Requests的图片抓取和代理使用

作者: zhyuzh3d | 来源:发表于2019-01-11 00:41 被阅读33次

点击这里进入人工智能嘚吧嘚目录,观看全部文章


图片抓取与存储

注意文件名和存储位置。

import requests
url='https://img3.doubanio.com/view/photo/s_ratio_poster/public/p480747492.webp'
res=requests.get(url)
img=res.content
with open( 'data/test.webp','wb' ) as f:
    f.write(img)
print('OK')

代理使用

可以使用西刺免费代理IP获得代理地址和端口号,注意经常不稳定无法连接,还要注意优先改为http而不是https。

import requests
from bs4 import BeautifulSoup
import time

url='https://movie.douban.com/top250'
proxy = {
    'http': 'http://119.101.113.239:9999'
}
header = {
    'User-agent': 'Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1)',
}
res = requests.get(url,headers=header, proxies=proxy)
soup = BeautifulSoup(res.text)
movies = soup.find_all('div', 'info')
print(movies[0])

点击这里进入人工智能DBD嘚吧嘚目录,观看全部文章


每个人的智能新时代

如果您发现文章错误,请不吝留言指正;
如果您觉得有用,请点喜欢;
如果您觉得很有用,欢迎转载~


END

相关文章

网友评论

    本文标题:0110编程-Python的Requests的图片抓取和代理使用

    本文链接:https://www.haomeiwen.com/subject/dgqtdqtx.html