美文网首页爬虫
urllib.request.Request构建请求对象

urllib.request.Request构建请求对象

作者: 郭祺迦 | 来源:发表于2018-09-27 11:54 被阅读0次

构建请求对象

user-agent:客户端浏览器类型;中文名也叫用户代理

#需要创建一个头部文件

headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36 QIHU 360SE'}

#生成一个请求对象

request = urllib.request.Request(url=url,headers=headers)

目的:模拟浏览器,防止被当爬虫处理

相关文章

网友评论

    本文标题:urllib.request.Request构建请求对象

    本文链接:https://www.haomeiwen.com/subject/uyheoftx.html