美文网首页程序员
python爬虫爬取海量高清图片!这绝对是动漫迷们的福音

python爬虫爬取海量高清图片!这绝对是动漫迷们的福音

作者: 一墨编程学习 | 来源:发表于2018-11-29 14:42 被阅读15次

    正文

    目标网站divinl

    首先看看这网站是怎样加载数据的;

    打开网站后发现底部有下一页的按钮,ok,爬这个网站就很简单了;

    日文的

    我们目标是获取每张图片的高清的源地址,并且下载图片到桌面;

    先随便打开一张图片看看详细;

    只有一张图

    你的名字

    看起来还挺清晰的,单击新窗口打开图片

    image

    大图

    然后下载图片,说实话,这图片很小

    比较小

    *PS:一定要禁用广告拦截插件,不然加载不出图

    禁用过滤广告插件

    接着分析我们从何入手

    1、先去主页面获取每个图片的详细页面的链接

    这链接还是比较好获取的,直接 F12 审核元素,或者右键查看代码,手机上chrome和firefox在url前面加上 "view-source"

    image

    链接

    2、从详细页面获取图片大图地址

    随便打开一个图片详细页面如图:

    image

    详细页面

    接着按 F12 审核元素,我们需要定位该图片的链接,首先单击左上角的这玩意儿,像一个鼠标的图标:

    image

    左上角,一个鼠标的图标

    接着只需要单击网页上的图片就能定位到代码了:

    image

    代码

    3、用大图地址下载该图片

    这个很简单,看代码

    代码(纯手打,没有一点复制粘贴)

    先安装 Requests 和 BeautifulSoup 库

    image

    接着在详细网页里获取那个看似高清的图片的不确定是否为真实图片链接并下载(/滑稽)

    image image

    下载完成

    主要代码

    image

    完成,贴上所有代码

    image image image

    最后,如果有想一起学习python,爬虫,可以来一下我的python群【 784758214 】,内有安装包和学习视频资料免费分享,好友都会在里面交流,分享一些学习的方法和需要注意的小细节,每天也会准时的讲一些项目实战案例。找工作什么最重要?看中的还是你的实战经验

    点击:加入

    相关文章

      网友评论

        本文标题:python爬虫爬取海量高清图片!这绝对是动漫迷们的福音

        本文链接:https://www.haomeiwen.com/subject/eozzqqtx.html