美文网首页
我的网络爬虫出生了

我的网络爬虫出生了

作者: 木禾米粥 | 来源:发表于2016-05-26 09:26 被阅读38次

    我的第一个在线网页的爬虫出生了,感觉自己就是有黑魔法(黑科技)的养蛊的人。

    我的代码和运行界面:


    总结一下经验:

    一、使用chrome解析网页源代码的时候,copy selector路径有时并不准,因为有些标签是动态加载的,其中的标签代码是自动生成的,与源代码并不一致,要得到准确的路径,最好还是分析网页的源代码。

    二、BeautifulSoup解析网页返回的对象是一个类似的列表的对象,可以好像获取列表元素一样获取它的元素,如果该对象只有一个元素,就直接去它的[0]元素就可以了。

    相关文章

      网友评论

          本文标题:我的网络爬虫出生了

          本文链接:https://www.haomeiwen.com/subject/tycarttx.html