Java爬虫之爬取图片

网友评论

• 
  雨果是程序员:楼主，你好，根据你github中的代码，出现如下异常：
  Exception in thread "main" org.jsoup.HttpStatusException: HTTP error fetching URL. Status=514, URL=http://www.mzitu.com/86778/13
  at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:682)
  at org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:629)
  at org.jsoup.helper.HttpConnection.execute(HttpConnection.java:261)
  at org.jsoup.helper.HttpConnection.get(HttpConnection.java:250)
  at com.crawler.image.SpiderUtil.getSrc(SpiderUtil.java:51)
  at com.crawler.image.SpiderImageTest.main(SpiderImageTest.java:18)
  十分疑惑，Test.java中注释的内容，执行出现异常如上。希望帮忙解答一下。十分感谢！

  Koali啦:@生活用来品 你好！出现这个问题是因为SpiderUtils中的getSrc方法中的Jsoup.connect(url).get()里面的url是null导致的，所以可以捕获异常，如果出异常就返回空。但是这样还是报错，引文在SaveImage方法中。URL oneUrl = new URL（url）里面如果url还是空的话会报错，同样可以捕获异常continue。还有因为目标网页不是一层不变的，所以爬虫过段时间会没有用的！如果可以请给我项目点个star！这是对我的支持！
• 
  昵称的简书:根据你的思路试试，去做个爬图展示下载的apk去，没做过类似的东西。

  昵称的简书:@Koali啦 哈哈，那感情好啊，做出来的话咱们可以交流交流哈，我也很爱看小说的。

  Koali啦: @prpr894 我也有这个想法，我想做个小说的app