美文网首页
2018-05-22日常杂记 小爬虫

2018-05-22日常杂记 小爬虫

作者: 家琦的三亩地 | 来源:发表于2018-05-22 22:49 被阅读0次

最近粉上花花,感觉这个姑娘的笑容很治愈啊。于是想下一些写真。在豆瓣相册和贴吧找到了比较全的《转调》。这几天老是被导师指派去写文档,出差什么的。艰苦的生活需要治愈啊。代码贴上了,喜欢花花的自己去下吧。

import requests
from bs4 import BeautifulSoup
import time
import datetime

fetch = [18*x for x in range(6)]
page = map(str,fetch)
urls = map(lambda x: "https://www.douban.com/photos/album/1622970129/?start="+x,page)

imglist = []


for url in urls:
    html = requests.get(url)
    htmltext = html.text
    soup=BeautifulSoup(htmltext,"lxml")
    imgs = soup.find_all("a",class_="photolst_photo")
    for each in imgs:
        imgurl = each.img['src']
        imglist.append(imgurl)
i = 0
for each in imglist:
    try:
        pic = requests.get(each)
    except requests.exceptions.ConnectionError:
        print(each)
        continue
    filename = str(i) + ".jpg"
    fp = open(filename,'wb')
    fp.write(pic.content) #写入图片  
    fp.close()  
    print(str(i)+"下载成功")
    i = i +1 

print(len(imglist))
治愈.jpg

相关文章

  • 2018-05-22日常杂记 小爬虫

    最近粉上花花,感觉这个姑娘的笑容很治愈啊。于是想下一些写真。在豆瓣相册和贴吧找到了比较全的《转调》。这几天老是被导...

  • 爬虫杂记

    update:2017-9-1每到deadline开发都十分有动力,XD。 分布式模块celery Django后...

  • 2018-05-23

    2018-05-22 vavawing 2018-05-22 23:13 · 字数 513 · 阅读 4 · 日记...

  • Python爬虫架构5模板 | 你真的会写爬虫吗?

    1、写在前面的话 咱们直接进入今天的主题---你真的会写爬虫吗?为啥标题是这样,因为我们日常写小爬虫都是一个py文...

  • 日常杂记

    最近变得有些多愁善感且易于动肝火 ,就如同夏日蝉的聒叫,无休无止……想说的很多,脑海中起了一遍又一遍的草稿,一旦真...

  • 日常杂记

    一夜迷糊,在做梦。 我回到中学年代,坐在课堂上听老师讲课。那是代数又像物理题。我左思右想,还是解不出来。 老师的目...

  • 日常杂记

    6.26 看着天气预报.又盼着过几日的雨了。驱走这恼人的闷热。 早上到教室的路上,鸟儿不怕人,始终与我隔着那些许的...

  • 日常杂记

    百年老树的根,轻易就能毁掉,这个世界还有什么坚持是值得的? 十年风风雨雨获取的信任,一天之内就能土崩瓦解,人与人之...

  • 日常杂记

    飘来阵阵桂花香的九月,我踏进了校门,感谢! 每日,总在闹钟声响起后醒来,无意中却也养成了赖床的习惯...

  • 日常杂记

    灵感这东西有点神奇,它来的时候,那可以说是哗的一下就倾泻而出了;要是没有的话那你是想它怎么它就怎么不来。我想...

网友评论

      本文标题:2018-05-22日常杂记 小爬虫

      本文链接:https://www.haomeiwen.com/subject/xbfljftx.html