爬虫的分类

网络爬虫按照系统结构和实现技术，大致可以分为以下几种类型

• 通用网络爬虫：全网爬虫，爬取对象有种子URL扩展到整个网络
• 聚焦网络爬虫：又称主题网络爬虫是指选择性地爬行那些与预先定义好的主体页面相关的网络爬虫
• 增量式网络爬虫：对已爬取的网页进行增量式更新或只爬行新产生的或者已经发生变化网页的爬虫

• 深层网络爬虫
  实际的网络爬虫是集中爬虫技术相结合实现的
  下面对这几种爬虫进行详细的介绍

  
  爬虫特点