美文网首页爬虫
urllib.request.Request构建请求对象

urllib.request.Request构建请求对象

作者: 郭祺迦 | 来源:发表于2018-09-27 11:54 被阅读0次

    构建请求对象

    user-agent:客户端浏览器类型;中文名也叫用户代理

    #需要创建一个头部文件

    headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36 QIHU 360SE'}

    #生成一个请求对象

    request = urllib.request.Request(url=url,headers=headers)

    目的:模拟浏览器,防止被当爬虫处理

    相关文章

      网友评论

        本文标题:urllib.request.Request构建请求对象

        本文链接:https://www.haomeiwen.com/subject/uyheoftx.html