爬虫趣操作

Python的主要应用——爬虫

1. 最主要的应用就是——对数据信息进行自动采集，批量自动抓取各种网上的数据和资源。

2. 采集后进行存储或处理，检索时只需在采集的信息中进行，即实现了私人的搜索引擎。

3. 按我们的目的进行采集，去掉了很多无关数据。

4. 更深层次地理解搜索引擎爬虫的工作原理，进行搜索引擎优化。

爬虫做的那些“趣操作”

1. 投票神器、点赞神器、抢票、预测（股市预测、票房预测）、社交关系网络。

2. 把知乎上某一问题的高赞答案全部抓取到本地并保存。

3. 一键爬取公众号标题和图片，或者设计师搜集素材。

4. 抓取同行店铺产品用户评价，可以针对用户的痛点进行营销活动。

5. 抓取店铺sku/spu、评论、客单价、客户群、销售额、每日价格趋势分析、并制作数据报表，大大提升运营效果。

6. 抢红包神器的原理：

    1. 红包消息——通过微信网页版来获取。因为网页版的消息接口可以被抓包分析，比较容易获取和使用。

    2. 发通知——发出声音，弹窗。

7. 抢票：

8. 获取豆瓣高分电影信息：创建保存excel文件运行代码，250部豆瓣高分电影的信息，全部爬取

9. 批量爬取知网论文

python：一把双刃剑，关键在于用的人。学什么到最后比的还是内在品格。