Java NIO学习笔记(上)_JAVA_编程开发_程序员俱乐部

中国优秀的程序员网站程序员频道CXYCLUB技术地图
热搜:
更多>>
 
您所在的位置: 程序员俱乐部 > 编程开发 > JAVA > Java NIO学习笔记(上)

Java NIO学习笔记(上)

 2014/4/15 21:18:04  brandNewUser  程序员俱乐部  我要评论(0)
  • 摘要:摘自并发编程网:http://ifeve.com/overview/仅作自己学习……1.概述JavaNIO由以下几个核心部分组成:lChannelslBufferslSelectors2.ChannelJavaNIO的通道类似流,但又有些不同:l既可以从通道中读取数据,又可以写数据到通道,但流的读写通常是单向的。l通道可以异步地读写。l通道中的数据总是要先读到一个Buffer,或者总是要从一个Buffer中写入。JavaNIO中最重要的通道的实现:lFileChannel:从文件中读写数据
  • 标签:笔记 学习 Java 学习笔记

class="MsoNormal" style="margin: 0cm 0cm 0pt;">摘自并发编程网:http://ifeve.com/overview/

仅作自己学习……

?

1.?? 概述

Java NIO 由以下几个核心部分组成:

l? Channels

l? Buffers

l? Selectors

?

2.?? Channel

Java NIO的通道类似流,但又有些不同:

l? 既可以从通道中读取数据,又可以写数据到通道,但流的读写通常是单向的。

l? 通道可以异步地读写。

l? 通道中的数据总是要先读到一个Buffer,或者总是要从一个Buffer中写入。

?

Java NIO中最重要的通道的实现:

l? FileChannel:从文件中读写数据;

l? DatagramChannel:通过UDP读写网络中的数据;

l? SocketChannel:通过TCP读写网络中的数据;

l? ServerSocketChannel监听新进来的TCP连接,对每个新进来的连接都会创建一个SocketChannel

?

3.?? Buffer

Java NIO中的Buffer用于和NIO通道进行交互。如你所知,数据是从通道读入缓冲区,从缓冲区写入到通道中的。

?

缓冲区本质上是一块可以写入数据,然后可以从中读取数据的内存。这块内存被包装成NIO Buffer对象,并提供了一组方法,用来方便的访问该块内存。

?

3.1?????????? Buffer的基本用法

使用Buffer读写数据一般遵循以下四个步骤:

1)? 写入数据到Buffer

2)? 调用flip()方法;

3)? Buffer中读取数据;

4)? 调用clear()方法或者compact()方法。

?

当向buffer写入数据时,buffer会记录下写了多少数据。一旦要读取数据,需要通过flip()方法将Buffer从写模式切换到读模式。在读模式下,可以读取之前写入到buffer的所有数据。

?

一旦读完了所有的数据,就需要清空缓冲区,让它可以再次被写入。有两种方式能清空缓冲区:调用clear()compact()方法。clear()方法会清空整个缓冲区。compact()方法只会清除已经读过的数据。任何未读的数据都被移到缓冲区的起始处,新写入的数据将放到缓冲区未读数据的后面。

?

3.2?????????? Buffercapacity,positionlimit

缓冲区本质上是一块可以写入数据,然后可以从中读取数据的内存。这块内存被包装成NIO Buffer对象,并提供了一组方法,用来方便的访问该块内存。

?

为了理解Buffer的工作原理,需要熟悉它的三个属性:

l? capacity

l? position

l? limit

?

positionlimit的含义取决于Buffer处在读模式还是写模式。不管Buffer处在什么模式,capacity的含义总是一样的。

?

?

?

3.2.1?????????????? capacity

作为一个内存块,Buffer有一个固定的大小值,也叫“capacity”。只能往里写capacitybytelongchar等类型。一旦Buffer满了,需要将其清空(通过读数据或者清除数据)才能继续写数据往里写数据。

?

3.2.2?????????????? position

当写数据到Buffer中时,position表示当前的位置。初始的position值为0。当一个bytelong等数据写到Buffer后, position会向前移动到下一个可插入数据的Buffer单元。position最大可为capacity – 1

?

当读取数据时,也是从某个特定位置读。当将Buffer从写模式切换到读模式,position会被重置为0。当从Bufferposition处读取数据时,position向前移动到下一个可读的位置。

?

3.2.3?????????????? limit

在写模式下,Bufferlimit表示你最多能往Buffer里写多少数据。写模式下,limit等于Buffercapacity

?

当切换Buffer到读模式时,limit表示你最多能读到多少数据。因此,当切换Buffer到读模式时,limit会被设置成写模式下的position值。换句话说,你能读到之前写入的所有数据(limit被设置成已写数据的数量,这个值在写模式下就是position

?

3.3?????????? Buffer的类型

Java NIO 有以下Buffer类型:

l? ByteBuffer

l? MappedByteBuffer

l? CharBuffer

l? DoubleBuffer

l? FloatBuffer

l? IntBuffer

l? LongBuffer

l? ShortBuffer

?

这些Buffer类型代表了不同的数据类型,可以通过char, short, int, long, floatdouble类型来操作缓冲区中的字节。

?

3.4?????????? Buffer的操作

3.4.1?????????????? Buffer分配

每个Buffer类型都会有一个allocate方法,在使用Buffer之前,需要先分配其capacity

?

3.4.2?????????????? Buffer中写数据

写数据到Buffer有两种方式:

l? Channel写到Buffer

l? 通过Bufferput()方法写到Buffer里,put方法有很多版本,允许你以不同的方式把数据写入到Buffer中。

?

flip()方法将Buffer从写模式切换到读模式。调用flip()方法会将position设回0,并将limit设置成之前position的值。

?

3.4.3?????????????? Buffer中读数据

Buffer中读取数据有两种方式:

l? Buffer读取数据到Channel

l? 使用get()方法从Buffer中读取数据,get方法有很多版本,允许你以不同的方式从Buffer中读取数据。

?

Buffer.rewind()position设回0,所以你可以重读Buffer中的所有数据。limit保持不变,仍然表示能从Buffer中读取多少个元素(bytechar等)。

?

3.4.4????????????? Buffer中的标记

?

一旦读完Buffer中的数据,需要让Buffer准备好再次被写入。可以通过clear()compact()方法来完成。

?

如果调用的是clear()方法,position将被设回0limit被设置成 capacity的值。换句话说,Buffer被清空了。Buffer中的数据并未清除,只是这些标记告诉我们可以从哪里开始往Buffer里写数据。如果Buffer中有一些未读的数据,调用clear()方法,数据将被遗忘,意味着不再有任何标记会告诉你哪些数据被读过,哪些还没有。

?

如果Buffer中仍有未读的数据,且后续还需要这些数据,但是此时想要先写些数据,那么使用compact()方法。compact()方法将所有未读的数据拷贝到Buffer起始处。然后将position设到最后一个未读元素正后面。limit属性依然像clear()方法一样,设置成capacity。现在Buffer准备好写数据了,但是不会覆盖未读的数据。

?

通过调用Buffer.mark()方法,可以标记Buffer中的一个特定position。之后可以通过调用Buffer.reset()方法恢复到这个position

?

3.4.5?????????????? equals()compareTo()方法

可以使用equals()compareTo()方法两个Buffer

equals()

当满足下列条件时,表示两个Buffer相等:

l? 有相同的类型(bytecharint等)。

l? Buffer中剩余的bytechar等的个数相等。

l? Buffer中所有剩余的bytechar等都相同。

如你所见,equals只是比较Buffer的一部分,不是每一个在它里面的元素都比较。实际上,它只比较Buffer中的剩余元素。

compareTo()方法

compareTo()方法比较两个Buffer的剩余元素(bytechar)如果满足下列条件,则认为一个Buffer“小于另一个Buffer

l? 第一个不相等的元素小于另一个Buffer中对应的元素

l? 所有元素都相等,但第一个Buffer比另一个先耗尽(第一个Buffer的元素个数比另一个少)

?

4.?? Scatter/Gather

Java NIO开始支持scatter/gatherscatter/gather用于描述从Channel(译者注:Channel在中文经常翻译为通道)中读取或者写入到Channel的操作。


分散(scatter)从Channel中读取是指在读操作时将读取的数据写入多个buffer中。因此,Channel将从Channel中读取的数据分散(scatter到多个Buffer中。

聚集(gather)写入Channel是指在写操作时将多个buffer的数据写入同一个Channel,因此,Channel 将多个Buffer中的数据聚集(gather后发送到Channel

?

scatter/gather经常用于需要将传输的数据分开处理的场合,例如传输一个由消息头和消息体组成的消息,你可能会将消息体和消息头分散到不同的buffer中,这样你可以方便的处理消息头和消息体。

?

4.1????????? Scattering Reads

Scattering Reads是指数据从一个channel读取到多个buffer中。

?

Buffer首先被插入到数组,然后再将数组作为channel.read()的输入参数。read()方法按照buffer在数组中的顺序将从channel中读取的数据写入到buffer,当一个buffer被写满后,channel紧接着向另一个buffer中写。

?

Scattering Reads在移动下一个buffer前,必须填满当前的buffer,这也意味着它不适用于动态消息(译者注:消息大小不固定)。换句话说,如果存在消息头和消息体,消息头必须完成填充(例如 128byte),Scattering Reads才能正常工作。

?

4.2????????? Gathering Writes

?

Gathering Writes是指数据从多个buffer写入到同一个channel

?

buffers数组是write()方法的入口参数,write()方法会按照buffer在数组中的顺序,将数据写入到channel,注意只有positionlimit之间的数据才会被写入。因此,如果一个buffer的容量为128byte,但是仅仅包含58byte的数据,那么这58byte的数据将被写入到channel中。因此与Scattering Reads相反,Gathering Writes能较好的处理动态消息。

?

5.?? 通道之间的数据传输

Java NIO中,如果两个通道中有一个是FileChannel,那你可以直接将数据从一个channel传输到另外一个channel

?

FileChanneltransferFrom()方法可以将数据从源通道传输到FileChannel中(这个方法在JDK文档中的解释为将字节从给定的可读取字节通道传输到此通道的文件中)。

?

方法的输入参数position表示从position处开始向目标文件写入数据,count表示最多传输的字节数。如果源通道的剩余空间小于 count个字节,则所传输的字节数要小于请求的字节数。


此外要注意,在SoketChannel的实现中,SocketChannel只会传输此刻准备好的数据(可能不足count字节)。因此,SocketChannel可能不会将请求的所有数据(count个字节)全部传输到FileChannel中。

?

transferTo()方法将数据从FileChannel传输到其他的channel中。参数则比较类似,SocketChannel会一直传输数据直到目标buffer被填满。

?

6.?? Selector

Selector(选择器)是Java NIO中能够检测一到多个NIO通道,并能够知晓通道是否为诸如读写事件做好准备的组件。这样,一个单独的线程可以管理多个channel,从而管理多个网络连接。

?

6.1????????? 为什么使用Selector

仅用单个线程来处理多个Channels的好处是,只需要更少的线程来处理通道。事实上,可以只用一个线程处理所有的通道。对于操作系统来说,线程之间上下文切换的开销很大,而且每个线程都要占用系统的一些资源(如内存)。因此,使用的线程越少越好。

?

现代的操作系统和CPU多任务方面表现的越来越好,所以多线程的开销随着时间的推移,变得越来越小了。如果一个CPU有多个内核,不使用多任务可能是在浪费CPU的能力。

?

6.2????????? Selector的使用

首先,要进行Selector的创建,通过调用Selector.open()方法创建一个Selector

?

为了将ChannelSelector配合使用,必须将channel注册到selector上。通过SelectableChannel.register()方法来实现。

?

Selector一起使用时,Channel必须处于非阻塞模式下,channel.configureBlocking(false)。这也意味着不能将FileChannelSelector一起使用,因为FileChannel不能切换到非阻塞模式,而套接字通道都可以。

?

register()方法的第二个参数是一个“interest集合,意思是在通过Selector监听Channel时对什么事件感兴趣。可以监听四种不同类型的事件:

l? ConnectSelectionKey.OP_CONNECT

l? AcceptSelectionKey.OP_ACCEPT

l? ReadSelectionKey.OP_READ

l? WriteSelectionKey.OP_WRITE

?

通道触发了一个事件意思是该事件已经就绪。所以,某个channel成功连接到另一个服务器称为连接就绪。一个ServerSocketChannel准备好接收新进入的连接称为接收就绪。一个有数据可读的通道可以说是读就绪。等待写数据的通道可以说是写就绪

?

如果对不止一种事件感兴趣,那么可以用位或(|caozuofu.html" target="_blank">操作符将常量连接起来。

?

Selector注册Channel时,register()方法会返回一个SelectionKey对象。这个对象包含了一些你感兴趣的属性。

l? interest集合:所选择的感兴趣的事件集合;

l? ready集合:通道已经准备就绪的操作的集合;检测channel中什么事件或操作已经就绪,可以使用isAcceptable, isConnectable, isReadable, isWritable来进行实际的检测;

l? Channel

l? Selector

l? 附加的对象(可选):可以将一个对象或者更多信息附着到SelectionKey上,这样就能方便的识别某个给定的通道;

?

6.3????????? 通过Selector选择通道

一旦向Selector注册了一个或多个通道,就可以调用几个重载select()方法。这些方法返回你所感兴趣的事件(如连接、接受、读或写)已经准备就绪的那些通道。换句话说,如果你对读就绪的通道感兴趣,select()方法会返回读事件已经就绪的那些通道。

?

select()阻塞到至少有一个通道在你注册的事件上就绪了。select(long timeout)select()一样,除了最长会阻塞timeout毫秒(参数)selectNow()不会阻塞,不管什么通道就绪都立刻返回(译者注:此方法执行非阻塞的选择操作。如果自从前一次选择操作后,没有通道变成可选择的,则此方法直接返回零。)。

?

select()方法返回的int值表示有多少通道已经就绪。亦即,自上次调用select()方法后有多少通道变成就绪状态。如果调用select()方法,因为有一个通道变成就绪状态,返回了1,若再次调用select()方法,如果另一个通道就绪了,它会再次返回1。如果对第一个就绪的channel没有做任何操作,现在就有两个就绪的通道,但在每次select()方法调用之间,只有一个通道就绪了。

?

一旦调用了select()方法,并且返回值表明有一个或更多个通道就绪了,然后可以通过调用selectorselectedKeys()方法,访问“已选择键集(selected key set)”中的就绪通道。

?

Selector不会自己从已选择键集中移除SelectionKey实例。必须在处理完通道时自己移除。下次该通道变成就绪时,Selector会再次将其放入已选择键集中。SelectionKey.channel()方法返回的通道需要转型成要处理的类型,如ServerSocketChannelSocketChannel等。

?

某个线程调用select()方法后阻塞了,即使没有通道已经就绪,也有办法让其从select()方法返回。只要让其它线程在第一个线程调用select()方法的那个对象上调用Selector.wakeup()方法即可。阻塞在select()方法上的线程会立马返回。

?

如果有其它线程调用了wakeup()方法,但当前没有线程阻塞在select()方法上,下个调用select()方法的线程会立即“醒来(wake up)”。

?

用完Selector后调用其close()方法会关闭该Selector,且使注册到该Selector上的所有SelectionKey实例无效。通道本身并不会关闭。

?

完整的示例:

Selector的四种事件(接受,连接,读,写)是否就绪。

?

Selector selector = Selector.open();

channel.configureBlocking(false);

SelectionKey key = channel.register(selector, SelectionKey.OP_READ);

while(true) {

  int readyChannels = selector.select();

  if(readyChannels == 0) continue;

  Set selectedKeys = selector.selectedKeys();

  Iterator keyIterator = selectedKeys.iterator();

  while(keyIterator.hasNext()) {

    SelectionKey key = keyIterator.next();

    if(key.isAcceptable()) {

        // a connection was accepted by a ServerSocketChannel.

    } else if (key.isConnectable()) {

        // a connection was established with a remote server.

    } else if (key.isReadable()) {

        // a channel is ready for reading

    } else if (key.isWritable()) {

        // a channel is ready for writing

    }

    keyIterator.remove();

  }

}

 

 

?

?

?

  • 大小: 49.6 KB
  • 查看图片附件
发表评论
用户名: 匿名