博客
关于我
Netty框架内的宝藏:ByteBuf
阅读量:799 次
发布时间:2023-02-15

本文共 1257 字,大约阅读时间需要 4 分钟。

Netty框架中的ByteBuf设计

Netty框架中的ByteBuf设计

Netty框架中的ByteBuf设计旨在解决Java NIO中ByteBuffer的局限性。JDK自带的ByteBuffer虽然功能强大,但在实际应用中存在诸多痛点。例如,ByteBuffer的长度固定,难以动态扩展;其API设计不够友好,读写操作需要手动调用flip、rewind等方法,这增加了开发的复杂性。

Netty通过自定义实现ByteBuf,不仅提升了性能表现,还提供了更加友好的API接口。其核心思想是通过动态管理内存,实现高效的数据传输。

ByteBuf的分类

从内存分布和内存管理两个维度来看,Netty的ByteBuf主要有以下几种实现:

  • 堆内存字节缓冲区(HeapByteBuf):采用堆内存分配,回收速度较快,但需要复制数据到内核态进行IO操作。
  • 直接内存字节缓冲区(DireactByteBuf):使用直接内存,分配和回收速度较慢,但适合IO操作。
  • 基于对象池的字节缓冲区(PooledByteBuf):通过对象池管理缓冲区,减少了创建和销毁的性能消耗,但实现复杂。
  • 普通缓冲区(UnpooledByteBuf):无池化管理,完全依赖程序员手动管理。

ByteBuf的核心设计

ByteBuf作为Netty中数据传输的核心,主要通过两个指针(readIndex和writeIndex)协助读写操作。这种双指针机制简化了传统ByteBuffer的flip、rewind操作,使得读写更加高效。

在读取数据时,readIndex递增,读取的数据范围为readIndex - writeIndex。当数据被读取后,可以通过discardReadBytes方法释放这部分内存,腾出空间用于后续读取。

在写入数据时,writeIndex递增,数据可以写入writeIndex到capacity之间的区域。当写入数据超过当前容量时,ByteBuf会动态扩展以满足需求。这种动态扩展通常采用倍增或平滑算法,确保扩容效率。

UnpooledHeapByteBuf

UnpooledHeapByteBuf是HeapByteBuf的非池化实现,主要用于满足默认需求。相比DirectByteBuf,它在内存管理上更具优势,但仍需通过程序员手动管理内存。

其内部结构包括:

  • ByteBufAllocator:用于分配内存
  • array:实际存储数据的字节数组
  • tmpNioBuf:用于将ByteBuf转化为JDK的ByteBuffer

AbstractReferenceCountedByteBuf

AbstractReferenceCountedByteBuf采用引用计数机制,用于管理ByteBuf的生命周期。通过CAS操作实现引用计数器的增减,确保内存资源的自动回收。

总结

Netty的ByteBuf设计通过优化内存管理和读写操作,显著提升了网络通信性能。其动态扩展机制和空间复用技术,使得在高并发场景下依然能保持高效处理能力。

转载地址:http://wvcfk.baihongyu.com/

你可能感兴趣的文章
Netpas:不一样的SD-WAN+ 保障网络通讯品质
查看>>
netsh advfirewall
查看>>
Netty WebSocket客户端
查看>>
Netty 异步任务调度与异步线程池
查看>>
Netty中集成Protobuf实现Java对象数据传递
查看>>
Netty工作笔记0006---NIO的Buffer说明
查看>>
Netty工作笔记0011---Channel应用案例2
查看>>
Netty工作笔记0013---Channel应用案例4Copy图片
查看>>
Netty工作笔记0014---Buffer类型化和只读
查看>>
Netty工作笔记0020---Selectionkey在NIO体系
查看>>
Vue踩坑笔记 - 关于vue静态资源引入的问题
查看>>
Netty工作笔记0025---SocketChannel API
查看>>
Netty工作笔记0027---NIO 网络编程应用--群聊系统2--服务器编写2
查看>>
Netty工作笔记0050---Netty核心模块1
查看>>
Netty工作笔记0060---Tcp长连接和短连接_Http长连接和短连接_UDP长连接和短连接
查看>>
Netty工作笔记0077---handler链调用机制实例4
查看>>
Netty工作笔记0084---通过自定义协议解决粘包拆包问题2
查看>>
Netty常见组件二
查看>>
netty底层源码探究:启动流程;EventLoop中的selector、线程、任务队列;监听处理accept、read事件流程;
查看>>
Netty核心模块组件
查看>>