美文网首页python爬虫
scrapy中使用xpath的坑

scrapy中使用xpath的坑

作者: 风一样的存在 | 来源:发表于2018-12-25 19:53 被阅读0次

    1.定位兄弟节点

    在xpath解析中,通常有些页面很坑,定位到该节点但是对应的值确实在它的上面或者下面,所以怎么定位它的哥哥和弟弟呢。following-sibling和preceding-sibling,分别找寻下面的兄弟和上面的兄弟


    preceding-sibling
    following-sibling

    2.元素中含有<br>会解析成两个selector

    源码.png
    scrapy解析.png

    3.返回的response是html或者xml,里面的标签如果是大写的,会转化为小写 返回值的源码.png

    在代码中debug的时候显示的却是:


    scrapy代码中debug.png

    scrapy中的xpath区分大小写。

    相关文章

      网友评论

        本文标题:scrapy中使用xpath的坑

        本文链接:https://www.haomeiwen.com/subject/mdlthqtx.html