Java梳理之理解NIO(一)

以前nio包可能会要求高级才会需要,但是现在这部分内容已经属于常见的基础技能了,因为对nio这部分并不熟悉,所以花了些时间把这部分也补上来,这样之后的技能树就可以继续点下去了~。如果文中存在问题的话请帮忙指出。

过去我们使用的字节字符流操作属于传统IO,缺点在于它属于阻塞IO,比如InputStreamread()方法会等到数据被读取完成后才会继续向下走。之前看源码的时候就看到,其中的方法大部分都是有使用synchronized关键字来做到同步。在java 1.4的时候推出了nio包来提高速度和性能,不过也不用担心传统IO的使用,因为都已经使用nio重新实现过了。
nio的速度的提高得益于所使用的结构更接近于操作系统执行IO的方式,其中有三个概念,即:通道Channel和缓冲器Buffer、选择器Selector。可以从名称上理解这些概念:
通道Channel:类似于两点之间的路线,是数据交互的通道。
缓冲器Buffer:类似于路线之间的汽车,是装载数据的工具。
选择器Selector:类似于收费站,注册登记之后可以进行相应操作。

Channel

所有的通道都需要实现接口Channel,如下图所示:

Channel.png

接口Channel定义了两个方法open()close()方法,下面又存在几个子接口如:ReadableByteChannelWritableByteChannel,这两个接口定义的方法就是相应的读写方法int read(ByteBuffer dst)int write(ByteBuffer src),这两个接口之下还有共同的子接口ByteChannel,其中并没有添加新方法。不止于此,相应的还有各自的字节口如:接口ScatteringByteChannel继承于ReadableByteChannel,并且添加了两个读取的新方法long read(ByteBuffer[] dsts, int offset, int length)long read(ByteBuffer[] dsts),可以看到读取使用的是数组ByteBuffer[],相应的还有接口GatheringByteChannel继承于接口WritableByteChannel,添加了类似的long write(ByteBuffer[] srcs, int offset, int length)long write(ByteBuffer[] srcs)方法,这两个接口分别表示的是读和写通道。

除了这条线以外,还可以看到旁边也有相应的接口InterruptibleChannel和一些类,这里主要看一下SelectableChannel类,可以看到这个类中提供了两个方法SelectionKey register(Selector sel, int ops, Object att)SelectionKey register(Selector sel, int ops),说明它的子类能注册Selector。在图的最底下有四个类,即DatagramChannelSocketChannelFileChannelServerSocketChannel,分别对应四种情况即文件读写、UDP读写网络数据、TCP的ClientServer读写网络数据。虽然是最核心的类,但是可以看到这四个类是抽象类,并不能直接实例化,我们需要方法构建出它的实例,而不能直接new关键字。如,类FileChannel的实例可以通过旧的io操作类获取,如下所示:

/**
**FileChannel类实例获取
**/
public static void main(String[] arg0) throws FileNotFoundException{
        FileChannel fileChanelTest1 = new FileInputStream("/test/test.txt").getChannel();
        FileChannel fileChanelTest2 = new FileOutputStream("/test/test.txt").getChannel();
        FileChannel fileChanelTest3 = new RandomAccessFile("/test/test.txt","1").getChannel();
}

其他的三个类则通过静态的open()方法获取对应实例,如下所示:

/**
**DatagramChannel的open()方法
**/
public static DatagramChannel open() throws IOException {
    return SelectorProvider.provider().openDatagramChannel();
}
/**
**ServerSocketChannel的open()方法
**/
public static ServerSocketChannel open() throws IOException {
    return SelectorProvider.provider().openServerSocketChannel();
}
/**
**SocketChannel的open()方法
**/
public static SocketChannel open() throws IOException {
    return SelectorProvider.provider().openSocketChannel();
}

可以看到,这三个通道类都是通过SelectorProvider类的静态方法provider()返回SelectorProvider,然后获取对应的通道。可以看看这个类SelectorProvider,下面是它提供的几个公有方法:

/**
**SelectorProvider的公有方法
**/
public abstract DatagramChannel openDatagramChannel()throws IOException;
public abstract ServerSocketChannel openServerSocketChannel()throws IOException;
public abstract SocketChannel openSocketChannel()throws IOException;

public abstract Pipe openPipe()throws IOException;
public abstract AbstractSelector openSelector()throws IOException;

虽然这里都是抽象方法,但是可以看到,其中除了三个通道获取方法,还有两个其他的如PipeAbstractSelector也是在这里获取的,这个在接下来会看到。需要注意的是这四个关键通道类只有类FileChannel没有实现接口SelectableChannel,不能注册相应的Selector,也是因为不需要使用它实现网络操作。

Buffer

java.nio包下存在大量缓冲器类,其中以Buffer类为父类,子类主要分为几大类如:ByteBufferCharBufferDoubleBufferFloatBufferIntBufferLongBufferShortBufferStringCharBuffer和特殊的MappedByteBufferDirectByteBuffer。下面分析缓冲器类:

普通Buffer类

在Buffer类的定义中,存在字段markpositionlimitcapacity。其中的capacity表示在Buffer缓冲器的大小,即,能写多少个bytecharInt等,从这里就可以看出,Buffer其实是个容器;position表示读写时的当前位置;limit表示限制,即,在写模式下表示的最大的限制是capacity的值,而在读模式下则是当前position的值;mark表示标记。不仅于此,Buffer类还定义了一些方法,如下:

/**
**filp()方法源码
**/
public final Buffer flip() {
    limit = position;
    position = 0;
    mark = -1;
    return this;
    }
/**
**reset()方法源码
**/
public final Buffer reset() {
        int m = mark;
    if (m < 0)
        throw new InvalidMarkException();
    position = m;
    return this;
    }
/**
**clear()方法源码
**/
public final Buffer clear() {
    position = 0;
    limit = capacity;
    mark = -1;
    return this;
    }

flip()方法中将缓冲器的position赋值给limitmark置为-1,position置为0,即,将Buffer从写模式切换到读模式时用到,一般调用在写完数据到Buffer之后;reset()方法则将mark值赋值给字段positionclear()方法则将缓冲器的positionmarklimit都进行写模式的重置。这些方法的具体用法在之后会写到。

Buffer类的子类中存在着相应的数组字段用来存储数据,如ByteBuffer类存在byte[] hbCharBuffer类存在char[] hb。其中也添加了些静态方法,如allocate(int capacity),在ByteBuffer类中源码如下:

/**
**allocate(int capacity)方法ByteBuffer类中源码
**/
public static ByteBuffer allocate(int capacity) {
    if (capacity < 0)
        throw new IllegalArgumentException();
    return new HeapByteBuffer(capacity, capacity);
}

可以看到,返回的是一个ByteBuffer子类HeapByteBuffer的实例,而ByteBuffer类是一个抽象类,可以通过这个方法创建实例。当然,也不是只有这种方法才能创建实例,这些子类还提供了对应数据类型的wrap()方法,如下ByteBuffer中的wrap()源码:

/**
**wrap(byte[] array,int offset, int length)方法ByteBuffer类中源码
**/
public static ByteBuffer wrap(byte[] array,
                    int offset, int length)
    {
    try {
        return new HeapByteBuffer(array, offset, length);
    } catch (IllegalArgumentException x) {
        throw new IndexOutOfBoundsException();
    }
}
/**
**wrap(byte[] array)方法ByteBuffer类中源码
**/
public static ByteBuffer wrap(byte[] array) {
    return wrap(array, 0, array.length);
}

通过这两个方法也可以创建对应的Buffer缓冲器。在这些方法中,返回的都是HeapByteBuffer类型实例,这个类是ByteBuffer的子类,操作的是堆内存,因为使用前需要将文件写入堆中,属于间接模式。说了这个缓冲器之后,可以看看直接模式下的缓存器类MappedByteBufferDirectByteBuffer

MappedByteBuffer类

这个类是Java.nio引入的文件内存映射方案,读写性能特别高。既然是文件内存映射,操作的自然也是文件,在nio中也就是FileChannel通道来处理,可以在FileChannel看到如下代码:

/**
**map()方法示例
**/
public abstract MappedByteBuffer map(MapMode mode,long position, long size)throws IOException;

在这个方法中,需要传入参数:模式mode、位置position和大小size,通过这几个属性来映射文件,模式分为三种,即READ_ONLYREAD_WRITEPRIVATE,其中PRIVATE指的是私有、对映射部分缓冲的更改不会传播到原始文件上,更改也不会对其他程序可见。在FileChannel的实现类FileChannelImpl中有这个方法的实现,有兴趣的可以自行查看。

在类MappedByteBuffer源代码还可以看到几个公有方法如下:

/**
**isLoaded方法代码示例
**/
public final boolean isLoaded() {
    checkMapped();
        if ((address == 0) || (capacity() == 0))
            return true;
    return isLoaded0(((DirectByteBuffer)this).address(), capacity());
    }
/**
**load方法代码示例
**/
public final MappedByteBuffer load() {
    checkMapped();
        if ((address == 0) || (capacity() == 0))
            return this;
    load0(((DirectByteBuffer)this).address(), capacity(), Bits.pageSize());
    return this;
}
/**
**force方法代码示例
**/
public final MappedByteBuffer force() {
    checkMapped();
        if ((address == 0) || (capacity() == 0))
            return this;
    force0(((DirectByteBuffer)this).address(), capacity());
    return this;
}
//调用的原生方法
private native boolean isLoaded0(long address, long length);
private native int load0(long address, long length, int pageSize);
private native void force0(long address, long length);

这几个方法的作用是对映射区域的操作,其中方法load()将缓冲区的内容载入内存,并返回该缓冲区的引用;方法isLoaded()判断缓冲区的内容是否在物理内存中,若是则返回true,否则返回fasle;若是在READ_WRITE模式下,方法force()将对缓冲区映射的修改强行写入文件。

Selector

Java的nio包引入了选择器概念用来规避阻塞式线程的忙等操作,在上面写过,Selector的实例也是通过SelectorProvider类来获取,如下:

/**
**Selector的open()方法
**/
public static Selector open() throws IOException {
    return SelectorProvider.provider().openSelector();
}

这里可以跟进,看一下SelectorProviderprovider方法代码,如下:

/**
**provider方法源码
**/
public static SelectorProvider provider() {
    synchronized (lock) {
        if (provider != null)
        return provider;
        return (SelectorProvider)AccessController
        .doPrivileged(new PrivilegedAction() {
            public Object run() {
                if (loadProviderFromProperty())
                return provider;
                if (loadProviderAsService())
                return provider;
                provider = sun.nio.ch.DefaultSelectorProvider.create();
                return provider;
            }
            });
    }
    }

在这里会创建provider实例,然后通过调用相应的方法返回对应的通道或PipeSelector。其实这类有一个特别的就是通过反射创建了它自己,所以抽象类是可以实例化的,只是不能通过new关键字实例化。其中有一些源码我也不是很懂,欢迎来一起讨论。

要了解Selector,不得不说的是类SelectableChannel和类SelectionKey,其中SelectableChannel提供了register()方法,用来给通道注册相应的选择器监听,而在类SelectionKey中定义了四个常量:OP_READOP_WRITEOP_CONNECTOP_ACCEPT,来表示读就绪、写就绪、连接就绪和接受就绪,我们可以使用相应的is方法判断是否就绪,如boolean isReadable()。不仅于此,这个类还有几个方法如下:

public abstract SelectableChannel channel();        //Channel集合
public abstract Selector selector();        //selector 集合
public abstract int interestOps();      //interest集合
public abstract SelectionKey interestOps(int ops);      //interest集合
public abstract int readyOps();     //ready集合
//附加对象
public final Object attach(Object ob) {
    Object a = attachment;
    attachment = ob;
    return a;
    }

通过这些方法返回相应的事件集合或附加对象,我们可以通过这些事件进行相应的操作,具体的会在之后说到。

Pipe

在传统的IO中,有PipedInputStream/PipedOutputStreamPipedReader/PipedWriter之类的,在NIO中也有对应的Pipe管道来处理两个线程之间的通信。在这个类中,存在两个个静态内部类SourceChannelSinkChannel,通过这两个通道来达到信息交互的目的。

在最后说明一下,如果在java.nio包下没有看到实现类,可以去sun.nio.ch包下查看相应实现类,毕竟很多的类在java.nio下只有抽象类,但是继承实现的是在sun.nio.ch包下。最后,文中有的不足之处欢迎指出。

参考:
java.nio包
sun.nio.ch包

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,948评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,371评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,490评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,521评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,627评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,842评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,997评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,741评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,203评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,534评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,673评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,339评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,955评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,770评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,000评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,394评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,562评论 2 349

推荐阅读更多精彩内容

  • Java NIO(New IO)是从Java 1.4版本开始引入的一个新的IO API,可以替代标准的Java I...
    JackChen1024阅读 7,549评论 1 143
  • 转自 http://www.ibm.com/developerworks/cn/education/java/j-...
    抓兔子的猫阅读 2,290评论 0 22
  • (转载说明:本文非原创,转载自http://ifeve.com/java-nio-all/) Java NIO: ...
    数独题阅读 801评论 0 3
  • 前言: 之前的文章《Java文件IO常用归纳》主要写了Java 标准IO要注意的细节和技巧,由于网上各种学习途径,...
    androidjp阅读 2,898评论 0 22
  • (转载说明:本文非原创,转载自http://ifeve.com/java-nio-all/) Java NIO: ...
    柳岸阅读 814评论 0 3