美文网首页
多线程断点下载

多线程断点下载

作者: MengkZhang | 来源:发表于2019-05-13 14:23 被阅读0次

实现断点续传的逻辑,就是把当前线程下载的位置保存起来,下次下载的时候,就按照上次下载的位置继续下载,就行。

多线程加速下载见上一篇博客:多线程加速下载

存储当前线程下载的位置,存放在一个txt文件中

                    int total = 0; //代表当前线程下载的大小 
                    
                    while((len = in.read(buffer))!=-1){
                        raf.write(buffer, 0, len);
                        
                        total +=len;
                        //[8]实现断点续传 就是把当前线程下载的位置 给存起来 下次再下载的时候 就是按照上次下载的位置继续下载 就可以了
                        int currentThreadPosition =  startIndex + total;  //比如就存到一个普通的.txt文本中
                        
                        //[9]用来存当前线程下载的位置 
                        RandomAccessFile raff = new RandomAccessFile(getFilename(path)+threadId+".txt", "rwd");
                        raff.write(String.valueOf(currentThreadPosition).getBytes());
                        raff.close();
                        
                        
                    }

改变当前线程的开始位置

                //[4.0]如果中间断过  继续上次的位置 继续下载   从文件中读取上次下载的位置 
                
                File file =new File(getFilename(path)+threadId+".txt");
                if (file.exists() && file.length()>0) {
                    FileInputStream fis = new  FileInputStream(file);
                    BufferedReader bufr = new  BufferedReader(new InputStreamReader(fis));
                    String lastPositionn = bufr.readLine();  //读取出来的内容就是上一次下载的位置
                    int lastPosition = Integer.parseInt(lastPositionn);

                    
                    //[4.0.1]要改变一下 startIndex 位置
                    startIndex = lastPosition + 1;
                    
                    System.out.println("线程id::"+threadId + "真实下载的位置"+":"+startIndex+"-----"+endIndex);
                    
                    fis.close(); //关闭流 
                }
                
                //[4.1]设置一个请求头Range (作用告诉服务器每个线程下载的开始位置和结束位置)
                conn.setRequestProperty("Range", "bytes="+startIndex+"-"+endIndex);

所有线程下载完毕,删除txt文本,线程同步的方式实现

                    //[10]把.txt文件删除  每个线程具体什么时候下载完毕了 我们不知道 
                    
                    synchronized (DownLoadThread.class) {
                        runningThread--;
                        if (runningThread == 0) {
                            //说明所有的线程都执行完毕了 就把.txt文件删除
                            for (int i = 0; i < threadCount; i++) {
                                File  delteFile = new File(getFilename(path)+i+".txt");
                                delteFile.delete();
                            }
                            
                             
                            
                            
                        }
                    }

程序完整代码;

public class MutilDownLoad {

    
    //[1]定义下载的路径 
    private  static String path = "http://192.168.11.73:8080/feiq.exe";
    
    private static final int threadCount = 3; //假设开三个线程 
     
    private static int runningThread;  //代表当前正在运行的线程 
    
    
    
    public static void main(String[] args) {
        
        
        //[一 ☆☆☆☆]获取服务器文件的大小   要计算每个线程下载的开始位置和结束位置
        
        try {

            //(1) 创建一个url对象 参数就是网址 
            URL url = new URL(path);
            //(2)获取HttpURLConnection 链接对象
            HttpURLConnection conn = (HttpURLConnection) url.openConnection();
            //(3)设置参数  发送get请求
            conn.setRequestMethod("GET"); //默认请求 就是get  要大写
            //(4)设置链接网络的超时时间 
            conn.setConnectTimeout(5000);
            //(5)获取服务器返回的状态码 
            int code = conn.getResponseCode(); //200  代表获取服务器资源全部成功  206请求部分资源    
            if (code == 200) {

                //(6)获取服务器文件的大小
                int length = conn.getContentLength();
                
                //[6.1]把 线程的数量赋值给正在运行的线程
                runningThread = threadCount;
                
                
                System.out.println("length:"+length);
                
                //[二☆☆☆☆ ] 创建一个大小和服务器一模一样的文件 目的提前把空间申请出来 
                RandomAccessFile rafAccessFile = new RandomAccessFile(getFilename(path), "rw");
                rafAccessFile.setLength(length);
                
                //(7)算出每个线程下载的大小 
                int blockSize = length /threadCount;
                
                //[三☆☆☆☆  计算每个线程下载的开始位置和结束位置 ]
                for (int i = 0; i < threadCount; i++) {
                    int startIndex = i * blockSize;   //每个线程下载的开始位置 
                    int endIndex = (i+1)*blockSize - 1;
                    //特殊情况 就是最后一个线程 
                    if (i == threadCount - 1) {
                        //说明是最后一个线程 
                        endIndex = length - 1;
                        
                    }
                    
                    System.out.println("线程id:::"+i + "理论下载的位置"+":"+startIndex+"-----"+endIndex);
                    
                    //四 开启线程去服务器下载文件 
                    DownLoadThread downLoadThread = new DownLoadThread(startIndex, endIndex, i);
                    downLoadThread.start();
                    
                }
                
                
                
            }

        } catch (Exception e) {
            e.printStackTrace();
        }
        
        
        
    }
    
    
    //定义线程去服务器下载文件  
    private static class DownLoadThread extends Thread{
        //通过构造方法把每个线程下载的开始位置和结束位置传递进来 
        
        private int startIndex;
        private int endIndex;
        private int threadId;
        public DownLoadThread(int startIndex,int endIndex,int threadId){
            this.startIndex = startIndex;
            this.endIndex  = endIndex;
            this.threadId = threadId;
        }
        
        @Override
        public void run() {
            //四  实现去服务器下载文件的逻辑  
            
            try {

                //(1) 创建一个url对象 参数就是网址 
                URL url = new URL(path);
                //(2)获取HttpURLConnection 链接对象
                HttpURLConnection conn = (HttpURLConnection) url
                        .openConnection();
                //(3)设置参数  发送get请求
                conn.setRequestMethod("GET"); //默认请求 就是get  要大写
                //(4)设置链接网络的超时时间 
                conn.setConnectTimeout(5000);
                
                
                //[4.0]如果中间断过  继续上次的位置 继续下载   从文件中读取上次下载的位置 
                
                File file =new File(getFilename(path)+threadId+".txt");
                if (file.exists() && file.length()>0) {
                    FileInputStream fis = new  FileInputStream(file);
                    BufferedReader bufr = new  BufferedReader(new InputStreamReader(fis));
                    String lastPositionn = bufr.readLine();  //读取出来的内容就是上一次下载的位置
                    int lastPosition = Integer.parseInt(lastPositionn);

                    
                    //[4.0.1]要改变一下 startIndex 位置
                    startIndex = lastPosition + 1;
                    
                    System.out.println("线程id::"+threadId + "真实下载的位置"+":"+startIndex+"-----"+endIndex);
                    
                    fis.close(); //关闭流 
                }
                
                //[4.1]设置一个请求头Range (作用告诉服务器每个线程下载的开始位置和结束位置)
                conn.setRequestProperty("Range", "bytes="+startIndex+"-"+endIndex);
                
                //(5)获取服务器返回的状态码 
                int code = conn.getResponseCode(); //200  代表获取服务器资源全部成功  206请求部分资源 成功  
                if (code == 206) {
                    //[6]创建随机读写文件对象 
                    RandomAccessFile raf = new RandomAccessFile(getFilename(path), "rw");
                    //[6]每个线程要从自己的位置开始写 
                    raf.seek(startIndex);
                    
                    InputStream in = conn.getInputStream(); //存的是feiq.exe 
                    
                    //[7]把数据写到文件中
                    int len = -1;
                    byte[] buffer = new byte[1024*1024];//1Mb
                    
                    int total = 0; //代表当前线程下载的大小 
                    
                    while((len = in.read(buffer))!=-1){
                        raf.write(buffer, 0, len);
                        
                        total +=len;
                        //[8]实现断点续传 就是把当前线程下载的位置 给存起来 下次再下载的时候 就是按照上次下载的位置继续下载 就可以了
                        int currentThreadPosition =  startIndex + total;  //比如就存到一个普通的.txt文本中
                        
                        //[9]用来存当前线程下载的位置 
                        RandomAccessFile raff = new RandomAccessFile(getFilename(path)+threadId+".txt", "rwd");
                        raff.write(String.valueOf(currentThreadPosition).getBytes());
                        raff.close();
                        
                        
                    }
                    raf.close();//关闭流  释放资源
                    
                    System.out.println("线程id:"+threadId + "---下载完毕了");
                    
                    //[10]把.txt文件删除  每个线程具体什么时候下载完毕了 我们不知道 
                    
                    synchronized (DownLoadThread.class) {
                        runningThread--;
                        if (runningThread == 0) {
                            //说明所有的线程都执行完毕了 就把.txt文件删除
                            for (int i = 0; i < threadCount; i++) {
                                File  delteFile = new File(getFilename(path)+i+".txt");
                                delteFile.delete();
                            }
                            
                             
                            
                            
                        }
                    }
                    
                    
                    
                    
                    
                }

            } catch (Exception e) {
                e.printStackTrace();
            }
            
            
            
        }
    }
    
    //获取文件的名字    "http://192.168.11.73:8080/feiq.exe";
    public static String getFilename(String path){
        
        int start =  path.lastIndexOf("/")+1;
        return path.substring(start);
    }
    
    
}

相关文章

  • Android 多线程断点下载

    Android 多线程断点下载 概念 多线程断点下载:意思是把一个下载文件分成多个,然后分配每个线程去下载分段,当...

  • Android下载文件(一)下载进度&断点续传

    索引 Android下载文件(一)下载进度&断点续传 Android下载文件(二)多线程并发&断点续传(待续) A...

  • 实现Android多线程断点续传下载

    断点续传原理一、从上次的位置继续下载。 二、从上次写入的文件继续写入。 多线程结合断点续传下载 多线程无非是将待下...

  • 断点续传和下载原理

    文件上传客户端: 下面是多线程下载 断点续传和断点下载都是用的RandomAccessFile, 它具有移动指定的...

  • Okhttp多线程断点续传

    目录 1、断点续传相关定义2、多线程下载实现方案 1、断点续传相关定义 1.1、断点续传: 记录上次下载的位置,下...

  • FileDownloader的简单使用

    FileDownlaoder 支持多任务下载 支持多线程下载 支持 断点续传 github地址:https://g...

  • 多线程断点下载

    断点下载思路: 1.首先获取网络文件的长度,在本地创建一个相同大小的文件 2.创建N个线程,将网络文件平均分为N份...

  • 多线程断点下载

    根据多线程下载,我们知道,当我们在下载的时候如果遇到断电或者损坏,我们要从以前记录的数据文件接着下载,这样的下载就...

  • 多线程断点下载

    实现断点续传的逻辑,就是把当前线程下载的位置保存起来,下次下载的时候,就按照上次下载的位置继续下载,就行。 多线程...

  • 造轮子 - RxDownload

    基于RxJava打造的下载工具, 支持多线程下载和断点续传, 智能判断是否支持断点续传等功能 标签(空格分隔): ...

网友评论

      本文标题:多线程断点下载

      本文链接:https://www.haomeiwen.com/subject/yeblaqtx.html