美文网首页
爬取wiki接口记录

爬取wiki接口记录

作者: 大锤在学习 | 来源:发表于2018-09-18 15:08 被阅读0次

    保存cookie的方法:(requests)

    ses = requests.session()  

    ses.post(url,data,headers)

    cookie = ses.cookies  #即可获取cookie值

    注:在ses.post()中添加verify = False 可关闭证书验证

    BeautifulSoup4:

         bs = BeautifulSoup(html,features="html.parser")

        api_span = bs.find_all(class_="plugin_pagetree_children_span")

        api_address = []

        for api in api_span:

            api_address.append(api.text)

        return api_address

    相关文章

      网友评论

          本文标题:爬取wiki接口记录

          本文链接:https://www.haomeiwen.com/subject/cnfpnftx.html