设为首页 加入收藏

TOP

图解ByteBuffer
2019-05-11 02:30:22 】 浏览:49
Tags:图解 ByteBuffer

缓冲区(Buffer)

缓冲区(Buffer)就是在内存中预留指定大小的存储空间用来对输入/输出(I/O)的数据作临时存储,这部分预留的内存空间就叫做缓冲区:

使用缓冲区有这么两个好处:

1、减少实际的物理读写次数

2、缓冲区在创建时就被分配内存,这块内存区域一直被重用,可以减少动态分配和回收内存的次数

举个简单的例子,比如A地有1w块砖要搬到B地

由于没有工具(缓冲区),我们一次只能搬一本,那么就要搬1w次(实际读写次数)

如果A,B两地距离很远的话(IO性能消耗),那么性能消耗将会很大

但是要是此时我们有辆大卡车(缓冲区),一次可运5000本,那么2次就够了

相比之前,性能肯定是大大提高了。

而且一般在实际过程中,我们一般是先将文件读入内存,再从内存写出到别的地方

这样在输入输出过程中我们都可以用缓存来提升IO性能。

所以,buffer在IO中很重要。在旧I/O类库中(相对Java.nio包)中的BufferedInputStream、BufferedOutputStream、BufferedReader和BufferedWriter在其实现中都运用了缓冲区。java.nio包公开了Buffer API,使得Java程序可以直接控制和运用缓冲区。

在Java NIO中,缓冲区的作用也是用来临时存储数据,可以理解为是I/O操作中数据的中转站。缓冲区直接为通道(Channel)服务,写入数据到通道或从通道读取数据,这样的操利用缓冲区数据来传递就可以达到对数据高效处理的目的。在NIO中主要有八种缓冲区类(其中MappedByteBuffer是专门用于内存映射的一种ByteBuffer):


Fields

所有缓冲区都有4个属性:capacity、limit、position、mark,并遵循:mark <= position <= limit <= capacity,下表格是对着4个属性的解释:

属性 描述
Capacity 容量,即可以容纳的最大数据量;在缓冲区创建时被设定并且不能改变
Limit 表示缓冲区的当前终点,不能对缓冲区超过极限的位置进行读写操作。且极限是可以修改的
Position 位置,下一个要被读或写的元素的索引,每次读写缓冲区数据时都会改变改值,为下次读写作准备
Mark 标记,调用mark()来设置mark=position,再调用reset()可以让position恢复到标记的位置

Methods


1、实例化

java.nio.Buffer类是一个抽象类,不能被实例化。Buffer类的直接子类,如ByteBuffer等也是抽象类,所以也不能被实例化。

但是ByteBuffer类提供了4个静态工厂方法来获得ByteBuffer的实例:

方法 描述
allocate(int capacity) 从堆空间中分配一个容量大小为capacity的byte数组作为缓冲区的byte数据存储器
allocateDirect(int capacity) 是不使用JVM堆栈而是通过操作系统来创建内存块用作缓冲区,它与当前操作系统能够更好的耦合,因此能进一步提高I/O操作速度。但是分配直接缓冲区的系统开销很大,因此只有在缓冲区较大并长期存在,或者需要经常重用时,才使用这种缓冲区
wrap(byte[] array) 这个缓冲区的数据会存放在byte数组中,bytes数组或buff缓冲区任何一方中数据的改动都会影响另一方。其实ByteBuffer底层本来就有一个bytes数组负责来保存buffer缓冲区中的数据,通过allocate方法系统会帮你构造一个byte数组
wrap(byte[] array,
int offset, int length)

在上一个方法的基础上可以指定偏移量和长度,这个offset也就是包装后byteBuffer的position,而length呢就是limit-position的大小,从而我们可以得到limit的位置为length+position(offset)



我写了这几个方法的测试方法,大家可以运行起来更容易理解

  1. publicstaticvoidmain(Stringargs[])throwsFileNotFoundException{
  2. System.out.println("----------Testallocate--------");
  3. System.out.println("beforealocate:"
  4. +Runtime.getRuntime().freeMemory());
  5. //如果分配的内存过小,调用Runtime.getRuntime().freeMemory()大小不会变化?
  6. //要超过多少内存大小JVM才能感觉到?
  7. ByteBufferbuffer=ByteBuffer.allocate(102400);
  8. System.out.println("buffer="+buffer);
  9. System.out.println("afteralocate:"
  10. +Runtime.getRuntime().freeMemory());
  11. //这部分直接用的系统内存,所以对JVM的内存没有影响
  12. ByteBufferdirectBuffer=ByteBuffer.allocateDirect(102400);
  13. System.out.println("directBuffer="+directBuffer);
  14. System.out.println("afterdirectalocate:"
  15. +Runtime.getRuntime().freeMemory());
  16. System.out.println("----------Testwrap--------");
  17. byte[]bytes=newbyte[32];
  18. buffer=ByteBuffer.wrap(bytes);
  19. System.out.println(buffer);
  20. buffer=ByteBuffer.wrap(bytes,10,10);
  21. System.out.println(buffer);
  22. }

2、另外一些常用的方法

方法 描述
limit(), limit(10)等 其中读取和设置这4个属性的方法的命名和jQuery中的val(),val(10)类似,一个负责get,一个负责set
reset() 把position设置成mark的值,相当于之前做过一个标记,现在要退回到之前标记的地方
clear() position = 0;limit = capacity;mark = -1; 有点初始化的味道,但是并不影响底层byte数组的内容
flip() limit = position;position = 0;mark = -1; 翻转,也就是让flip之后的position到limit这块区域变成之前的0到position这块,翻转就是将一个处于存数据状态的缓冲区变为一个处于准备取数据的状态
rewind() 把position设为0,mark设为-1,不改变limit的值
remaining() return limit - position; 返回limit和position之间相对位置差
hasRemaining() return position < limit返回是否还有未读内容
compact() 把从position到limit中的内容移到0到limit-position的区域内,position和limit的取值也分别变成limit-position、capacity。如果先将positon设置到limit,再compact,那么相当于clear()
get() 相对读,从position位置读取一个byte,并将position+1,为下次读写作准备
get(int index) 绝对读,读取byteBuffer底层的bytes中下标为index的byte,不改变position
get(byte[] dst, int offset, int length) 从position位置开始相对读,读length个byte,并写入dst下标从offset到offset+length的区域
put(byte b) 相对写,向position的位置写入一个byte,并将postion+1,为下次读写作准备
put(int index, byte b) 绝对写,向byteBuffer底层的bytes中下标为index的位置插入byte b,不改变position
put(ByteBuffer src) 用相对写,把src中可读的部分(也就是position到limit)写入此byteBuffer
put(byte[] src, int offset, int length) 从src数组中的offset到offset+length区域读取数据并使用相对写写入此byteBuffer


以下为一些测试方法:

  1. publicstaticvoidmain(Stringargs[]){
  2. System.out.println("--------Testreset----------");
  3. buffer.clear();
  4. buffer.position(5);
  5. buffer.mark();
  6. buffer.position(10);
  7. System.out.println("beforereset:"+buffer);
  8. buffer.reset();
  9. System.out.println("afterreset:"+buffer);
  10. System.out.println("--------Testrewind--------");
  11. buffer.clear();
  12. buffer.position(10);
  13. buffer.limit(15);
  14. System.out.println("beforerewind:"+buffer);
  15. buffer.rewind();
  16. System.out.println("beforerewind:"+buffer);
  17. System.out.println("--------Testcompact--------");
  18. buffer.clear();
  19. buffer.put("abcd".getBytes());
  20. System.out.println("beforecompact:"+buffer);
  21. System.out.println(newString(buffer.array()));
  22. buffer.flip();
  23. System.out.println("afterflip:"+buffer);
  24. System.out.println((char)buffer.get());
  25. System.out.println((char)buffer.get());
  26. System.out.println((char)buffer.get());
  27. System.out.println("afterthreegets:"+buffer);
  28. System.out.println("\t"+newString(buffer.array()));
  29. buffer.compact();
  30. System.out.println("aftercompact:"+buffer);
  31. System.out.println("\t"+newString(buffer.array()));
  32. System.out.println("------Testget-------------");
  33. buffer=ByteBuffer.allocate(32);
  34. buffer.put((byte)'a').put((byte)'b').put((byte)'c').put((byte)'d')
  35. .put((byte)'e').put((byte)'f');
  36. System.out.println("beforeflip()"+buffer);
  37. //转换为读取模式
  38. buffer.flip();
  39. System.out.println("beforeget():"+buffer);
  40. System.out.println((char)buffer.get());
  41. System.out.println("afterget():"+buffer);
  42. //get(index)不影响position的值
  43. System.out.println((char)buffer.get(2));
  44. System.out.println("afterget(index):"+buffer);
  45. byte[]dst=newbyte[10];
  46. buffer.get(dst,0,2);
  47. System.out.println("afterget(dst,0,2):"+buffer);
  48. System.out.println("\tdst:"+newString(dst));
  49. System.out.println("buffernowis:"+buffer);
  50. System.out.println("\t"+newString(buffer.array()));
  51. System.out.println("--------Testput-------");
  52. ByteBufferbb=ByteBuffer.allocate(32);
  53. System.out.println("beforeput(byte):"+bb);
  54. System.out.println("afterput(byte):"+bb.put((byte)'z'));
  55. System.out.println("\t"+bb.put(2,(byte)'c'));
  56. //put(2,(byte)'c')不改变position的位置
  57. System.out.println("afterput(2,(byte)'c'):"+bb);
  58. System.out.println("\t"+newString(bb.array()));
  59. //这里的buffer是abcdef[pos=3lim=6cap=32]
  60. bb.put(buffer);
  61. System.out.println("afterput(buffer):"+bb);
  62. System.out.println("\t"+newString(bb.array()));
  63. }

图解

put

写模式下,往buffer里写一个字节,并把postion移动一位。写模式下,一般limit与capacity相等。bytebuffer-put

flip

写完数据,需要开始读的时候,将postion复位到0,并将limit设为当前postion。bytebuffer-flip

get

从buffer里读一个字节,并把postion移动一位。上限是limit,即写入数据的最后位置。bytebuffer-get

clear

将position置为0,并不清除buffer内容。bytebuffer-clear

mark相关的方法主要是mark()(标记)和reset()(回到标记),比较简单,就不画图了。

】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
上一篇Kafka史上最详细原理总结   .. 下一篇分布式系统概述

最新文章

热门文章

Hot 文章

Python

C 语言

C++基础

大数据基础

linux编程基础

C/C++面试题目