菜鸟nginx源码剖析数据结构篇(三) 单向链表 ngx_list_t

 

  • Author:Echo Chen(陈斌)

  • Email:chenb19870707@gmail.com

  • Blog:Blog.csdn.net/chen19870707

    Date:October 23h, 2014

     

    1.ngx_list优势和特点

     

    ngx_list _t是一个顺序容器,它实际上是动态数组和单向链表的结合体,扩容起来比动态数组简单的多,可以一次扩容一个数组,所以说它结合了 链表插入删除不需要移动的 和 数组下标快速索引 的优势,设计非常让人叫绝,此外它还有以下特点:

    • 链表中存储的元素是灵活的,可以是任何一种数据结构。

    • 链表元素需要占用的内存由ngx_list_t管理,它已经通过数组分配好了。
    • 小块的内存使用链表访问O(n)效率是低下的,可以使用数组通过直接通过偏移量来直接访问O(1)。

    2.源代码位置

     

    头文件:http://trac.nginx.org/nginx/browser/nginx/src/core/ngx_list.h

    源文件:http://trac.nginx.org/nginx/browser/nginx/src/core/ngx_list.c

     

    3.数据结构定义

     

    前面说到ngx_list_t是一个数组链表,链表中的每个结点都是一个数组,ngx_list_part_t 描述的是链表中的一个结点,这个结点又是一个数组,elts为数组首地址,nelts为该数组已经使用的个数,*next为下一个链表结点的指针,定义如下:

     

       1: typedef struct ngx_list_part_s  ngx_list_part_t;
       2:  
       3: //描述链表中的一个结点,这个结点又是一个数组
       4: struct ngx_list_part_s {
       5:     void             *elts;     //首地址
       6:     ngx_uint_t        nelts;    //已经使用的个数
       7:     ngx_list_part_t  *next;     //下一个链表节点的指针
       8: };

     

    ngx_list_t是描述整个链表,其中last 为链表中最后一个数组,part为链表中首个数组,size为数组每个元素占用空间小,nalloc为每个数组可以容纳的元素个数,pool为链表内存池对象,定义如下:

     

     

       1: typedef struct {
       2:     ngx_list_part_t  *last;        //链表中最后一个数组元素
       3:     ngx_list_part_t   part;        //链表中的首个数组元素
       4:     size_t            size;        //每个数组元素占用的空间大小
       5:     ngx_uint_t        nalloc;      //每个数组结点的容量,即每个数组最多可以存放多少个元素
       6:     ngx_pool_t       *pool;        //链表中的内存池对象指针
       7: } ngx_list_t;

     

    其结构如下图所示,最下面一行为内存映像,可以看到整个内存中仅仅多了 一个ngx_list_t 和 几个ngx_list_part_s结果,内存并没有太多的浪费,nginx在内存方面的苛刻确实值得我们学习

     

     

    4.链表创建ngx_list_create和初始化ngx_list_init

     

       1: //链表创建,pool为内存池对象,size为每个数组元素的大小,n为每个数组可以容纳的元素个数
       2: ngx_list_t *ngx_list_create(ngx_pool_t *pool, ngx_uint_t n, size_t size)
       3: {
       4:     ngx_list_t  *list;
       5:     
       6:     //分配ngx_list_t结构
       7:     list = ngx_palloc(pool, sizeof(ngx_list_t));
       8:     if (list == NULL) {
       9:         return NULL;
      10:     }
      11:  
      12:     //初始化
      13:     if (ngx_list_init(list, pool, n, size) != NGX_OK) {
      14:         return NULL;
      15:     }
      16:  
      17:     return list;
      18: }
      19:  
      20: //链表初始化,list为链表结构(在create中创建),pool为内存池,size为每个数组元素的大小,n为每个数组可以容纳的元素个数
      21: static ngx_inline ngx_int_t ngx_list_init(ngx_list_t *list, ngx_pool_t *pool, ngx_uint_t n, size_t size)
      22: {
      23:     //分配一个数组,并用链表首结点指向它
      24:     list->part.elts = ngx_palloc(pool, n * size);
      25:     if (list->part.elts == NULL) {
      26:         return NGX_ERROR;
      27:     }
      28:  
      29:     //已使用个数为0
      30:     list->part.nelts = 0;
      31:     //没有下一个结点,next指为NULL
      32:     list->part.next = NULL;
      33:     //最后一个结点也指向刚刚分配的数组
      34:     list->last = &list->part;
      35:     //数组每个元素大小为size
      36:     list->size = size;
      37:     //数组能容纳元素个数为n
      38:     list->nalloc = n;
      39:     //内存池为pool
      40:     list->pool = pool;
      41:  
      42:     return NGX_OK;
      43: }

     

    可以看到,ngx_list_init调用成功后,会创建一个数组结点。

     

    5.链表添加元素操作ngx_list_push

     

       1: //链表添加元素,l为链表结构
       2: void *ngx_list_push(ngx_list_t *l)
       3: {
       4:     void             *elt;
       5:     ngx_list_part_t  *last;
       6:  
       7:     //last指向链表最后一个结点
       8:     last = l->last;
       9:  
      10:     //如果最后一个结点的数组已经满了
      11:     if (last->nelts == l->nalloc) {
      12:  
      13:         /* the last part is full, allocate a new list part */
      14:         
      15:         //从内存池中分配一个ngx_list_part_t数组对象
      16:         last = ngx_palloc(l->pool, sizeof(ngx_list_part_t));
      17:         if (last == NULL) {
      18:             return NULL;
      19:         }
      20:         
      21:         //从内存池中给数组对象元素分配空间,每个元素大小为size,元素数目为nalloc
      22:         last->elts = ngx_palloc(l->pool, l->nalloc * l->size);
      23:         if (last->elts == NULL) {
      24:             return NULL;
      25:         }
      26:  
      27:         //新分配的数组已使用结点个数为0,下一个链表结点为NULL
      28:         last->nelts = 0;
      29:         last->next = NULL;
      30:  
      31:         //将新分配的数组链到链表,并把链表尾指针指向新分配数组
      32:         l->last->next = last;
      33:         l->last = last;
      34:     }
      35:     
      36:     //elts为数组首地址,elts + size * nelts 即位为分配数组元素的位置
      37:     elt = (char *) last->elts + l->size * last->nelts;
      38:     
      39:     //分配个数+1
      40:     last->nelts++;
      41:  
      42:     return elt;
      43: }
     
    可以看到,push的思想很简单,每次都往链表最后一个数组添加,数组满后就再增加一个数组结点,这里push的时间复杂度为O(1),没有任何遍历操作,充分利用了“链表尾插” 和 “数组下标索引”的优势。 
     

    6.疑问

    源代码中只给了链表的插入操作,没有删除操作,看起来不完整,这里猜测这个链表结构应该不会直接使用,而是被再次封装。

     

    7.实战

     

    看完源代码,这个list设计还是很巧妙的,结合了数组和链表各自的优势,确实不得不让人拍手叫绝。下面尝试给出ngx_list_t的使用例子:

     

     

       1: int main()
       2: {
       3:     ngx_list_t *pList = ngx_list_create( r->pool,4,sizeof( ngx_str_t));
       4:     if( NULL == pList)
       5:     {
       6:         return -1;
       7:     } 
       8:     
       9:     ngx_str_t *str = ngx_list_push(pList);
      10:     if( NULL == str)
      11:     {
      12:         return -1;
      13:     }
      14:  
      15:     str->len = sizeof("This is a test for ngx_list_t");
      16:     str->value = "This is a test for ngx_list_t";
      17:  
      18:     //遍历
      19:      ngx_list_part_t *part = &pList->part;
      20:     ngx_str_t *str = part->elts;
      21:     
      22:     for(int i = 0;;i++)
      23:     {
      24:         if( i >= part->nelts)
      25:         {   
      26:             //已经遍历完最后一个数组,没有下一个结点了
      27:             if( NULL == part->next)
      28:             {
      29:                 break;
      30:             }
      31:             
      32:             //还有下一个数组,part指到下一个数组,并把str指到新数组的地址
      33:             part = part->next;
      34:             str = part->elts;
      35:            
      36:             //重置计数器
      37:             i = 0;
      38:          }
      39:  
      40:         //输出结点
      41:         cout << "list elemts :" << str[i] << endl;
      42:         
      43:     }

     

     

posted on 2014-12-03 13:11  小光zfg  阅读(428)  评论(0编辑  收藏  举报