基于 Scrapy 的租房信息爬虫

作者: 柯振旭 | 来源:发表于2018-05-29 13:18 被阅读1次

租的房子到期了,我用程序员的方式找到了新的住处。

想换租房子的来这找房子,不想换租房子的来学技术啦!

一个租房信息爬虫,基于 Scrapy,使用 Elasticsearch 提供存储和搜索功能,使用 Kibana 提供搜索和分析界面,使用 Redis 去重,使用 Docker 一键部署。

目前聚合了链家,58同城,豆瓣,可以先看图片再找相应的房子描述,也可以根据关键字搜索房源,一个关键字搜出三个网站(会越来越多)的结果,具体还能玩出什么花样就看你们的了![奸笑]

租房信息爬虫

https://github.com/kezhenxu94/house-renting

如果你觉得有用,请给个 star Õ_Õ

相关文章

网友评论

    本文标题:基于 Scrapy 的租房信息爬虫

    本文链接:https://www.haomeiwen.com/subject/yvaojftx.html