深入浅出变长结构体【转】
深入浅出变长结构体
1、 问题的引出
项目中用到数据包的处理,但包的大小是不固定的,其长度由包头的2字节决定。比如如下的包头:88 0f 0a ob cd ef 23 00 。长度由头2个字节880f决定,考虑字节序,转为0f88,转为10进制3976个字节的包长度。
这个时候存储包的时候,一方面可以考虑设定包的大小固定:如4K=4*1024=4096个字节,因为最大包长不可能超过4k,但该方法的有缺陷,存在一种极端就是包最小仅含包头不含数据域,此时包为8个字节,浪费了4096-8 =4088个字节的存储空间。另一方面考虑有没有一种方法能根据长度进行存储,或者说初始不分配长度,计算出了长度后再分配存储呢。而实际项目中正是通过包头计算出了包的整体大小的。
这就引出了变长结构体的概念。
2、 什么叫变长结构体?
如下所示:
- struct Var_Len_Struct
- {
- int nsize;
- char buffer[0];
- };
那结构体是怎么实现可变长的呢?如上所示,请注意看结构体中的最后一个元素,一个没有元素的数组。我们可以通过动态开辟一个比结构体大的空间,然后让buffer去指向那些额外的空间,这样就可以实现可变长的结构体了。更为巧妙的是,我们甚至可以用nsize存储字符串buffer的长度。
并且,上述的结构体可以扩展,比如笔者项目中遇到的存储数据包,前面可能类似包头的部分(存储类型、长度等信息),而后面buffer则存储数据部分。
同时,需要引起注意的:ISO/IEC 9899-1999里面,这么写是非法的,这个仅仅是GNU C的扩展,gcc可以允许这一语法现象的存在。但最新的C/C++不知道是否可以,我没有测试过。C99允许。
3、变长结构体的好处体现在哪?
可能有的同学会问到,1引出部分如果说定义定长数组浪费空间,定义一个指针不也能指向变长的数据域部分吗?
是的,是可以实现的。那么我们就对比下有什么不同。
结构体1:s_one,用指针指向数据域部分;
结构体2:s_two, 用[0]的数组;
结构体3:s_three, 因为有的编译器不支持[0],我们用[1]来表示;多了些存储。
- #include <stdafx.h>
- #include <iostream>
- using namespace std;
- const int BUF_SIZE = 100;
- struct s_one
- {
- ints_one_cnt;
- char*s_one_buf;
- };
- struct s_two
- {
- ints_two_cnt;
- chars_two_buf[0];
- };
- struct s_three
- {
- ints_three_cnt;
- chars_three_buf[1];
- };
- int main()
- {
- //赋值用
- constchar* tmp_buf = "abcdefghijklmnopqrstuvwxyz";
- intntmp_buf_size = strlen(tmp_buf);
- //<1>注意s_one 与s_two的大小的不同
- cout<< "sizeof(s_one) = " << sizeof(s_one) << endl; //8
- cout<< "sizeof(s_two) = " << sizeof(s_two) << endl; //4
- cout<< "sizeof(s_three) = " << sizeof(s_three) << endl;//5-->8结构体对齐
- cout<< endl;
- //为buf分配100个字节大小的空间
- intntotal_stwo_len = sizeof(s_two) + (1 + ntmp_buf_size) * sizeof(char);
- intntotal_sthree_len = sizeof(s_three) + ntmp_buf_size * sizeof(char);
- //给s_one buf赋值
- s_one*p_sone = (s_one*)malloc(sizeof(s_one));
- memset(p_sone,0, sizeof(s_one));
- p_sone->s_one_buf= (char*)malloc(1 + ntmp_buf_size);
- memset(p_sone->s_one_buf,0, 1 + ntmp_buf_size);
- memcpy(p_sone->s_one_buf,tmp_buf, ntmp_buf_size);
- //给s_two buf赋值
- s_two*p_stwo = (s_two*)malloc(ntotal_stwo_len);
- memset(p_stwo,0, ntotal_stwo_len);
- memcpy((char*)(p_stwo->s_two_buf),tmp_buf, ntmp_buf_size); //不用加偏移量,直接拷贝!
- //给s_three_buf赋值
- s_three*p_sthree = (s_three*)malloc(ntotal_sthree_len);
- memset(p_sthree,0, ntotal_sthree_len);
- memcpy((char*)(p_sthree->s_three_buf),tmp_buf, ntmp_buf_size);
- cout<< "p_sone->s_one_buf = " << p_sone->s_one_buf<< endl;
- cout<< "p_stwo->s_two_buf = " << p_stwo->s_two_buf<< endl;
- cout<< "p_sthree->s_three_buf = " <<p_sthree->s_three_buf << endl; //不用加偏移量,直接拷贝!
- cout<< endl;
- //<2>注意s_one 与s_two释放的不同!
- if(NULL != p_sone->s_one_buf)
- {
- free(p_sone->s_one_buf);
- p_sone->s_one_buf= NULL;
- if(NULL != p_sone)
- {
- free(p_sone);
- p_sone= NULL;
- }
- cout<< "free(p_sone) successed!" << endl;
- }
- if(NULL != p_stwo)
- {
- free(p_stwo);
- p_stwo= NULL;
- cout<< "free(p_stwo) successed!" << endl;
- }
- if(NULL != p_sthree)
- {
- free(p_sthree);
- p_sthree= NULL;
- cout<< "free(p_sthree) successed!" << endl;
- }
- return0;
- }
笔者vc6.0的编译器会有如下的警告:
运行结果如下:
对比结果,我们能发现:
<1> 存储大小方面:s_two的存储较s_one、s_three都要少,[0]的好处,即用指针的方式需要多开辟存储空间的。
<2> 数据连续存储方面:s_one明显数据域是单独开辟的空间,与前的nsize不在连续的存储区域,而s_two,s_three则在连续的存储空间下。
<3>释放内存方面:显然s_one的指针的方式,需要先释放数据域部分,才能释放指向结构体的指针变量;而s_two,s_three可以直接释放。
总结如下:
结构体最后使用0或1的长度数组的原因,主要是为了方便的管理内存缓冲区,如果你直接使用指针而不使用数组,那么,你在分配内存缓冲区时,就必须分配结构体一次,然后再分配结构体内的指针一次,(而此时分配的内存已经与结构体的内存不连续了,所以要分别管理即申请和释放)。
而如果使用数组,那么只需要一次就可以全部分配出来,反过来,释放时也是一样,使用数组,一次释放,使用指针,得先释放结构体内的指针,再释放结构体。还不能颠倒次序。
其实变长结构体就是分配一段连续的的内存,减少内存的碎片化,简化内存的管理。
4、变长结构体的应用
<1>Socket通信数据包的传输;
<2>解析数据包,如笔者遇到的问题。
<3>其他可以节省空间,连续存储的地方等。