美文网首页
Java nio深入浅出

Java nio深入浅出

作者: 业余的猫 | 来源:发表于2017-04-12 15:08 被阅读0次

一直有着对nio的高效莫名的喜欢,今天我就来说说nio的那些事儿。
非阻塞:阻塞一直以来都是计算机解决复杂问题比较简单的思路,同样它也是低效的代名词,当程序被阻塞,似乎他已经停下来并且执着于当前的事情,而对于新的任务,它需要一直等着当前程序结束阻塞,很多时候这种行为是没有意义的,但又不得不那样做。
对于IO操作更是如此,所以Java1.4出来了新的IO。

概念介绍

  • Channel
    可以翻译为通道,和IO中的流对应,不同的是,Channel是双向的,而Stream只能从一端到另一端(单向)
  • Buffer
    缓冲区,用来存放数据的区域,它有四个索引用来进行高效的操作
    • capacity:buffer的容量
    • limit:索引能到达的地方,通常情况和容量的大小一致
    • mark:标记,像书签一样,保存你刚刚索引,下次很容易技能找到
    • position:位置,当前正在操作数据的位置
  • Selector(暂不涉及)
    单线程下可以管理多个Channel的分发器

代码实战

以下借文件拷贝这一功能说明nio操作流程
@SuppressWarnings("resource")
public static void copy(File src, File dest) {
    if(src == null || dest == null) 
        throw new NullPointerException("源文件或目标文件为空!");
    if(src.isDirectory() || dest.isDirectory()) 
        throw new IllegalArgumentException("我不能对目录进行复制");
    if(!src.exists())
        throw new RuntimeException("源文件不存在");
    if(src.length() == 0)
        throw new RuntimeException("文件內容為空!");
    if( !dest.exists())
        try {
            dest.createNewFile();
        } catch (IOException e) {
            throw new RuntimeException(e);
        }
    FileChannel srcChannel = null;
    FileChannel destChannel = null;
    try {
        /*
         * 创建FileChannel需要区分FileOutputStream和FileInputStream,
         * 如果是用FileOutputStream创建的Channel只能进行写操作而不能惊醒读操作,
         * 否则会报NonReadableChannelException,反之用FileInputStream
         * 创建的Channel只能进行读操作,而不能进行写操作,否则会报NonWritableChannelException
         * 当然除此之外,可以使用RandomAccessFile来替换,但必须指定操作方式,就像
         * mode = "r" / "rw" 但不可以是 "w"
         * RandomAccessFile r = new RandomAccessFile(file, mode)
        */
        
        
        srcChannel = new FileInputStream(src).getChannel();
        destChannel = new FileOutputStream(dest).getChannel();
        /*
         * 创建创建Buffer,这里有两个方法allocate(int) 和 allocateDirect(int)
         * 这两个方法表现在申请内存的方式不一样,allocateDirect是直接向操作系统申请内存,
         * 而allocate()是在Jvm堆中申请内存,当Java从外界获取到数据时,首先经过系统内存,
         * 然后再将这部分内存复制到Jvm内存中,所以使用allocateDirect()会省去一步操作,
         * 但是想要从操作系统获取内存是很复杂且耗时的,所以allocateDirect()不一定就快,
         * 通常分配的内存小于1M就用allocate,更大的话就用allocateDirect比较快。
         * ByteBuffer:
         * 这是最基本的byte的buffer,当然还有其他基本类型的buffer,当然除了Boolean
         * 不过你需要注意的是除ByteBuffer其他的buffer实际上只是ByteBuffer的不同表现形式,
         * 他们还是依据ByteBuffer作为真正的数据缓冲区,你可以使用byteBuffer的asCharBuffer
         * 等等其它类似的方法可以将ByteBuffer转化为其它的buffer
         */
        ByteBuffer byteBuffer = ByteBuffer.allocate(1024);
        //read方法的意思是将channel中的数据放到buffer中,如果返回结果为-1,表示channel中的数据已被读完
        while(srcChannel.read(byteBuffer) != -1) {
            /*
             * 翻转操作 将limit索引设置为 position, 设置position为0,清空mark
             * 其实过程是这样的,buffer的get操作和put操作都会使得position加1
             * 在channel的read操作实际上使用buffer的put操作往里面塞东西,不管有没有塞满
             * 都会设置limit索引,设置了limit很有必要,在通过buffer.get()操作或者channel.write(buffer)
             * 操作的时候会将position与limit进行比较,如果position大于limit就会抛出BufferUnderflowException
             * 同样如果不设置position为0,现在的position就等于limit,那么你通过get()将会抛出BufferUnderflowException
             * 而如果是channel.write()就不会有任何数据,你可以用以下的替换flip()操作的代码进行测试,
             * 届时你讲明白position置于0是多么重要。
             */
            //byteBuffer.limit(byteBuffer.position()); //设置limit为position
            byteBuffer.flip(); 
            //和读操作相反,它是将byteBuffer中的内容写入到channel中
            destChannel.write(byteBuffer);
            //清空操作(实际上它并没有清空数据,而仅仅是把那四个索引设为初始值),因为下一次channel.read()或者byteBuffer.put()操作
            //将会重新覆盖上一次的数据
            byteBuffer.clear();
        }
    } catch (IOException e) {
        throw new RuntimeException(e);
    } finally {
        try {
            if(srcChannel != null)
                srcChannel.close();
            if(destChannel != null)
                destChannel.close();
        } catch (IOException e) {
            throw new RuntimeException(e);
        }
    }
}

以上就是nio的魅力,可能有人会觉得有点麻烦比如说flip()和clear()操作,他们其实只进行了索引之间赋值操作,只有通过索引进行操作,效率才会如此高。所以不得不使用他们,总之需要记住这些索引的功能,才能更好的使用它。

文件映射到内存

出于性能考虑,在修改和创建大型文件的时候,内存往往承载不了太多的文件资源,但是用文件映射后,可以假定整个文件都在内存中,这时候,操作文件的性能可想而知。

@SuppressWarnings("resource")
private static void appendNameToFile(File file, String name) {
    if(file == null)
        throw new NullPointerException();
    if(!file.exists())
        throw new RuntimeException("文件不存在");
    try {
        FileChannel channel =  new RandomAccessFile(file, "rw").getChannel();
        try{
            /*
             * 通过channel获取到MappedByteBuffer,它是ByteBuffer的子类,并且内存是通过操作系统获取的
             * 在被gc回收之前一直有限,但你并不知道什么时候gc会进行回收操作
             * map方法有三个参数,第一个是指定读写模式,第二个参数指定从文件中的起始位置开始映射,第三个参数是从第二个
             * 参数的位置起需要映射的长度为多少
             * 需要注意的是以下操作会在文件末尾 添加一个空格,如果不想添加空格那么第三个参数需要设置为file.length() - 1
             * 后面的1代表第二个参数的值
             */
            //MappedByteBuffer buffer =channel.map(MapMode.READ_WRITE, 1, file.length());
            MappedByteBuffer buffer =channel.map(MapMode.READ_WRITE, file.length(), name.length());
            buffer.put(name.getBytes());
        } catch (IOException e) {
            throw new RuntimeException(e);
        } finally {
            try {
                channel.close();
            } catch (IOException e) {
                throw new RuntimeException(e);
            }
        }   
    } catch (FileNotFoundException e) {
        throw new RuntimeException(e);
    } 
}

文件锁

Java1.4提供了给文件加锁的功能(同步共享的文件),用于防止不同线程的同时访问或修改同一个文件,这包括Jvm线程和操作系统的本地线程,而且Java提供的文件锁对象操作系统是可见的,因为它直接映射到了操作系统的本地锁。

public static void addFileLock(File file) {
    if(file == null)
        throw new NullPointerException();
    if(!file.exists())
        throw new RuntimeException("文件不存在");
    try {
        @SuppressWarnings("resource")
        /*
         * 你不能使用FileInputStream,因为它势必会往channel里面写点东西,很自然的FileInputStream不会让你写,而是抛异常
         * 当然除了tryLock还有lock他们的区别仅仅是非阻塞与阻塞的问题,tryLock如果不能获取锁的话,方法直接会返回,而lock只会死等
         * 其实如果你再细心点,他们分别还重载了一个三参数的方法,类似 tryLock(long position, long size, boolean shared)
         * 通过这个方法声明可以看出来他是一个锁文件局部的方法,就像锁数据库和单独锁表的区别一样,你可以尝试一下它。
         */
        FileLock fileLock = new FileOutputStream(file).getChannel().tryLock();
        if(fileLock != null) {
            System.out.println("文件已被锁住");
            try {
                TimeUnit.SECONDS.sleep(20);
            } catch (InterruptedException e) {
            }
            fileLock.release();
            System.out.println("文件已被解锁");
        }
    }  catch (IOException e) {
        throw new RuntimeException(e);
    }
}

相关文章

  • Netty 源码分析系列

    Netty 源码分析系列 Netty入门简介 深入浅出NIO之Channel、Buffer 深入浅出NIO之Sel...

  • nio

    参考文章 Java Nio Java NIO学习笔记 - NIO客户端时序图 Java NIO学习笔记 - NIO...

  • Java Nio 之Buffer

    Java Nio 系列Java Nio 之BufferJava Nio 之直接内存Java Nio 之高级搬砖工(...

  • Java Nio 之高级搬运工(FileChannel)二

    Java Nio 系列Java Nio 之BufferJava Nio 之直接内存Java Nio 之高级搬砖工(...

  • Java Nio 之高级搬砖工(FileChannel) 一

    Java Nio 系列Java Nio 之BufferJava Nio 之直接内存Java Nio 之高级搬砖工(...

  • Java Nio 之直接内存

    Java Nio 系列Java Nio 之BufferJava Nio 之直接内存Java Nio 之高级搬砖工(...

  • Chapter 15 . Java NIO

    阅读原文 Chapter 15 . Java NIO 15.1 Java NIO 简介 Java NIO(New...

  • java NIO

    并发编程网 - Java NIO系列教程 javaeye - Java NIO 系列教程 NIO 入门 Java ...

  • Java学习资源收集

    Java基础核心 Java NIO Java NIO系列教程(并发编程网) 攻破JAVA NIO技术壁垒 Java...

  • java NIO详解

    Java NIO系列教程(1):Java NIO 概述 NIO学习系列:缓冲区内部实现机制 Java NIO系列教...

网友评论

      本文标题:Java nio深入浅出

      本文链接:https://www.haomeiwen.com/subject/jpwpattx.html