美文网首页
Python (判断网页编码类型)爬取网站

Python (判断网页编码类型)爬取网站

作者: chliar | 来源:发表于2018-03-07 10:03 被阅读0次
    import requests
    import chardet
    
    headers = {
        'User-Agent':'Mozilla/5.0 (Windows NT 6.1; Win64; x64) 
    AppleWebKit/537.36 (KHTML, like Gecko) Chrome/64.0.3282.186 
    Safari/537.36',
    }
    response = requests.get('http://www.baidu.com/',headers =headers )
     # print response.content
    

    判断网页的编码类型

    print chardet.detect(response.content)['encoding']
    
    # print chardet.detect(response.content)
    

    结果:

        >>   utf-8

    相关文章

      网友评论

          本文标题:Python (判断网页编码类型)爬取网站

          本文链接:https://www.haomeiwen.com/subject/kjadfftx.html