美文网首页
python爬虫动态页面xpath无法解析

python爬虫动态页面xpath无法解析

作者: 时间之外的故事 | 来源:发表于2019-05-20 15:46 被阅读0次

1. 无法解析的原因

当使用requests.get()获取某一页面后,程序正常返回html页面,但页面的主内容存在于<script>主内容</script>标签中,使用xpath无法解析。

2. 解决方案

  1. 使用正则
  2. 使用selenium模仿浏览器登录,获取JavaScript执行后的html页面

相关文章

网友评论

      本文标题:python爬虫动态页面xpath无法解析

      本文链接:https://www.haomeiwen.com/subject/havkzqtx.html