netmap分析(2)-原理分析之内存管理

╰半橙微兮° 2022-07-28 04:23 210阅读 0赞

本文发表在 [YYNOTE.COM][]， 地址 ： [http://yynote.com/blog/detail/networking/netmap-study-2-memory-mgt][http_yynote.com_blog_detail_networking_netmap-study-2-memory-mgt]

在工作中用到netmap这个高性能IO框架，觉得不错，就整理了一些分析笔记，和大家共享，欢迎交流.

## 内存池方案 ##

Netmap为了避免内存的频繁申请和释放，采用了内存池方案。预先在内核申请一块连续的大内存用于满足netmap的各种需求。根据netmap对内存的使用，内存池分为三部分：

*  用于分配netmap\_ if 数据结构.
 *  用于分配netmap\_ ring 数据结构.
 *  用于分配netmap\_ slot 数据结构.

如下图所示：

![netmap memory ring][]

每个netmap\_ if 在IF POOL 中都有一个偏移，而通过mmap 返回的地址是指向内存池开始地址，也是IF POOL 的开始地址。这样即可快速方便的在内核空间找到对应的netmap\_if 结构。

在netmap\_ if / netmapring/ netmap slot中均使用了偏移加索引这种方式定位结构体实例，其原因在于避免用户空间地址和内核空间地址的转换，通过偏移加索引，外加内 存映射，用户空间即可方便的通过映射的地址访问这些内核地址空间中的数据。

下图是整个内存池和各个相关数据结构的关系图：

![netmap-mem-init-study-one.png][]

## 内存池的初始化流程 ##

1. netmap\_adapter 的申请
 
 在 e1000\_ probe()->e1000\_ netmap \_ attach() ->netmap \_ attache() 中:申请 netmap\_ adapter 并且通过 WNA(ifp) = na; 保存至netdevice 的 ax25ptr 指针中。
2. 在linux\_ netmap\_ open 中会申请netmap\_ priv\_ d 结构priv, 然后存储在 file->private\_ data 域中.
3. 在ioctl (NIOCGINFO) 中调用 至: linux\_ netmap\_ ioctl -> netmap\_ ioctl 的Case NIOCGINFO中， 进而调用netmap\_ get\_ memory\_ locked(priv) . 此时， priv 中的np\_ ifp = NULL, 因此NA=NULL，所以: nmd = nm\_mem.
4. 接下来调用至netmap\_ mem\_ global\_ finalize. 在该函数中先调用netmap\_ memory\_ config 进行参数配置，比如页对齐等，然后调用netmap\_ mem\_ finalize\_ all , 调用 netmap\_ finalize\_ obj\_ allocator 分配内存，设置虚拟地址和物理地址映射查找表。
 
 至此，设置全局配置：
 
 <code style="font-family:Menlo,Monaco,Consolas,'Courier New',monospace;font-size:undefined; padding:0px; color:inherit; white-space:pre-wrap; background-color:transparent"> netmap_buf_size = nmd->pools[NETMAP_BUF_POOL]._objsize;  netmap_total_buffers = nmd->pools[NETMAP_BUF_POOL].objtotal;  netmap_buffer_lut = nmd->pools[NETMAP_BUF_POOL].lut;  netmap_buffer_base = nmd->pools[NETMAP_BUF_POOL].lut[0].vaddr; </code>
5. 接下来在 ioctl (NIOCREGIF) 中通过 get\_ ifp 获取到 net\_ device 的ifp , 然后在netmap\_ do\_ regif 中, priv->np\_ ifp = ifp; 将当前的net\_ device 保存至 file->private->np\_ ifp. 同时此时 通过 ifp 指针能够获取到保存在其中的 netmap\_ adapter 结构.  
 　　
6. 接下来是通过 netmap\_ if\_ new 调用 netmap\_ mem\_ if\_ new 分配netmap\_ adapter的 netmap\_ ring 管理结构体, 调用netmap\_ new\_ bufs 给每个ring的每个slot向netmap缓存区申请内存.

今天就写到这了.

文章版权归属[yynote.com][].转载请标明出处.

本文地址: [http://yynote.com/blog/detail/networking/netmap-study-2-memory-mgt][http_yynote.com_blog_detail_networking_netmap-study-2-memory-mgt]

[YYNOTE.COM]: http://yynote.com
[http_yynote.com_blog_detail_networking_netmap-study-2-memory-mgt]: http://yynote.com/blog/detail/networking/netmap-study-2-memory-mgt
[netmap memory ring]: http://yynote.com/tmp/pic/netmap-mem-ring.png
[netmap-mem-init-study-one.png]: http://yynote.com/tmp/pic/netmap-mem-init-study-one.png
[yynote.com]: http://yynote.com/