selenium:

作者: 韩小禹 | 来源:发表于2019-04-28 17:13 被阅读0次
  • 问题:爬取商品数据时,发现爬取的数据不完整,仔细对照后发现每一页的数据只抓取了一半,剩下的一半因为浏览器的滚动条没有滚动到最低端,导致数据不完整。

  • 解决方法:

browser.execute_script('window.scrollBy(0,3000)')
time.sleep(1)
browser.execute_script('window.scrollBy(0,5000)')
time.sleep(1)
browser.execute_script('window.scrollBy(0,8000)')

相关文章

网友评论

      本文标题:selenium:

      本文链接:https://www.haomeiwen.com/subject/trjjnqtx.html