美文网首页
2020-09-09

2020-09-09

作者: 北极狐雄鹰 | 来源:发表于2020-09-09 11:55 被阅读0次

爬虫的5个步骤

1、需求分析(不需要写成程序,是人处理的)

2、寻找网址(不需要写成程序,是人处理的)

3、下载网站返回内容(通过程序实现,程序包requests)

4、通过返回的信息找到需要爬取的数据内容(通过程序实现,正则表达式re,xpath对应的程序包lxml)

5、存储找到的数据内容(通过程序实现程序包mysql)需要学习python连接mysql

SCRAPY

相关文章

网友评论

      本文标题:2020-09-09

      本文链接:https://www.haomeiwen.com/subject/kkkeektx.html