美文网首页
python爬虫动态页面xpath无法解析

python爬虫动态页面xpath无法解析

作者: 时间之外的故事 | 来源:发表于2019-05-20 15:46 被阅读0次

    1. 无法解析的原因

    当使用requests.get()获取某一页面后,程序正常返回html页面,但页面的主内容存在于<script>主内容</script>标签中,使用xpath无法解析。

    2. 解决方案

    1. 使用正则
    2. 使用selenium模仿浏览器登录,获取JavaScript执行后的html页面

    相关文章

      网友评论

          本文标题:python爬虫动态页面xpath无法解析

          本文链接:https://www.haomeiwen.com/subject/havkzqtx.html