Merge pull request #76 from tydhot/master

add netty mem pool
pull/78/head
Yang Libin 4 years ago committed by GitHub
commit 1c62a708c0
No known key found for this signature in database
GPG Key ID: 4AEE18F83AFDEB23

@ -191,6 +191,7 @@
- [HashedWheelTimer & schedule](docs/Netty/Netty技术细节源码分析/HashedWheelTimer&schedule.md) - [HashedWheelTimer & schedule](docs/Netty/Netty技术细节源码分析/HashedWheelTimer&schedule.md)
- [ByteBuf 的内存泄漏原因与检测原理](docs/Netty/Netty技术细节源码分析/ByteBuf的内存泄漏原因与检测原理.md) - [ByteBuf 的内存泄漏原因与检测原理](docs/Netty/Netty技术细节源码分析/ByteBuf的内存泄漏原因与检测原理.md)
- [内存池之 PoolChunk 设计与实现](docs/Netty/Netty技术细节源码分析/内存池之PoolChunk设计与实现.md) - [内存池之 PoolChunk 设计与实现](docs/Netty/Netty技术细节源码分析/内存池之PoolChunk设计与实现.md)
- [内存池之从内存池申请内存](docs/Netty/Netty技术细节源码分析/内存池之从内存池申请内存.md)
## Dubbo ## Dubbo

@ -0,0 +1,24 @@
该文所涉及的 netty 源码版本为 4.1.16。
## Netty 内存池申请内存流程
在通过 PooledByteBufAllocator 中向内存池中进行内存申请的时候,最先开始的步骤便是从 PooledByteBufAllocator 中一系列 PoolArena 数组中,选择其中一个 PoolArena 进行分配。
这时将会从 PoolArena 数组中选取当前使用量最小的 PoolArena 与当前线程通过 ThreadLocal 进行绑定,之后涉及到内存申请将会直接从这个 PoolArena 进行获取,这个做法在高并发情况下频繁往内存池中进行内存申请的时候可以减少资源竞争,提升效率。
在当前线程获取与其绑定的 PoolArena 之后,接下来就是从 PoolArena 中继续申请内存。
为了适应各种大小的内存场景PoolArena 的组成也是为了其设计。
- PoolSubpage 数组 tinySubpagePools默认情况下当申请的内存小于 512b 的时候的时候将会从 tinySubpagePools 中直接选择 subPage内存池中的最小单位返回
- PoolSubpage 数组 smallSubpagePools默认情况下当申请的内存大于 512b 但是小于一个 page 的大小8kb的时候将会从 smallSubpagePools 返回一个 subPage。subPage 是由 poolChunk 中的 page 分配而来。
- PoolChunkList<T> qInit存储内存利用率 0-25%的 poolChunk
- PoolChunkList<T> q000存储内存利用率 1-50%的 poolChunk
- PoolChunkList<T> q025存储内存利用率 25-75%的 poolChunk
- PoolChunkList<T> q050存储内存利用率 50-100%的 poolChunk
- PoolChunkList<T> q075存储内存利用率 75-100%的 poolChunk
- PoolChunkList<T> q100存储内存利用率 100%的 poolChunk、
当申请的内存大于一个 page8kb但又小于一个 poolChunk2048kb总大小的时候将会从各个 PoolChunkList 中尝试获取一个 poolChunk 从中返回。PoolChunkList 是一个由 poolChunk 组成的链表。
以上几个 PoolChunkList由符合各个内存利用率的 poolChunk 组成,这几个 PoolChunkList 之间又互相首尾连接组成队列,方便 PoolChunk 在各个队列中根据自己当前的利用率进行转移到对应的位置上。
最后,当申请的内存大于一个 poolChunk 大小的时候将会直接申请一段非池化的内存返回,并不会占用内存池中的内存空间。
最后,到了从 poolChunk 中申请内存的场景,这一部分在[该文](https://github.com/doocs/source-code-hunter/blob/master/docs/Netty/Netty技术细节源码分析/内存池之PoolChunk设计与实现.md)中已经详细说明,这部分也是内存池中获取内存的最后一步。
Loading…
Cancel
Save