quake3引擎之内存池(一)

2017-06-03  本文已影响0人  ZerLon51

quake3(雷神之锤III)是ID software公司采用id Tech3技术开发的一款第一人称射击游戏。网上有不少的源码分析的文章了,其中不乏有写的很好的文章值得阅读的。作为一个较早的开源引擎,很多童鞋说里面很多技术过时了,诚然,关于这点,因为技术普通,故而不做评论。只是出于热爱去阅读罢了。


这篇主要分析quake3的内存池技术。只阅读了小块内存处理部分的代码,因此这里只分析这部分。大块内存的分配和管理是在代码的Hunk部分,留待下次分析。
关于内存池,网上也有很多相关的文章和算法。总结而言就是预分配内存块,然后根据需要从这个预分配的内存块查找到合适的大小的内存,返回给业务使用,使用完毕后,标记内存块状态为“回收”,以供下次使用,而非真正释放内存。
这样做的好处就是
1.不会产生内存碎片
2.比系统的分配(new/malloc)以及回收(delete/free)速度更快
3.内存的heap-dump
4.泄漏检测


所以想分析quake3的这块内存管理的内容,是因为其内存池的设计思路虽说都大同小异,但是却兼顾了内容使用率和速度,而且代码简洁有力,思路明晰,不愧是卡马克大神的作品。放到今天,依旧毫不逊色。该内存池的特点就如同注释里面说的

There is never any space between memblocks, and there will never be two
contiguous free memblocks.

已分配出去的两个内存块之间绝对不会有其他空间,绝对不会有两个连续标记空闲的内存块。

啰嗦了这么多,开始上干货吧。

内存块结构定义

#define ZONEID  0x1d4a11
#define MINFRAGMENT 64

typedef struct zonedebug_s {
    char *label;
    char *file;
    int line;
    int allocSize;
} zonedebug_t;

typedef struct memblock_s {
    int     size;           // including the header and possibly tiny fragments
    int     tag;            // a tag of 0 is a free block
    struct memblock_s       *next, *prev;
    int     id;             // should be ZONEID
#ifdef ZONE_DEBUG
    zonedebug_t d;
#endif
} memblock_t;

typedef struct {
    int     size;           // total bytes malloced, including header
    int     used;           // total bytes used
    memblock_t  blocklist;  // start / end cap for linked list
    memblock_t  *rover;
} memzone_t;

以上三个结构就是ZONE MEMORY ALLOCATION中使用的所有结构了。
其中,ZONEID用于标记由内存池分配的内存块,即memblock_t结构中的那个id,should be ZONEID。MINFRAGMENT表示最小的内存块大小,用于在分配之后,如果剩余的空间比这个大的话,就再分一个block出来。
zondebug_t结构主要在DEBUG的时候使用,用于标记请求分配的文件,行号,标签,大小信息,Dump的时候有用。
memblock_t结构是每个具体的分配出去的内存块的Header。记录了本次分配的大小以及前后block的地址,使用状态。
memzone_t结构负责管理内存池的。记录总分配大小,使用情况,内存块链表,下一个待检查的block地址。在每次分配和释放的时候,这个rover都会动态的去调整位置,然后下次分配就从rover的位置开始,适度避免检索部分出于“忙”状态的block。

对外接口

quake3的小块内存通过ZONE MEMORY BLOCK的块来实现分配和回收,提供对外的接口分别为

#ifdef ZONE_DEBUG
#define Z_TagMalloc(size, tag)          Z_TagMallocDebug(size, tag, #size, __FILE__, __LINE__)
#define Z_Malloc(size)                  Z_MallocDebug(size, #size, __FILE__, __LINE__)
#define S_Malloc(size)                  S_MallocDebug(size, #size, __FILE__, __LINE__)
void *Z_TagMallocDebug( int size, int tag, char *label, char *file, int line ); // NOT 0 filled memory
void *Z_MallocDebug( int size, char *label, char *file, int line );         // returns 0 filled memory
void *S_MallocDebug( int size, char *label, char *file, int line );         // returns 0 filled memory
#else
void *Z_TagMalloc( int size, int tag ); // NOT 0 filled memory
void *Z_Malloc( int size );         // returns 0 filled memory
void *S_Malloc( int size );         // NOT 0 filled memory only for small allocations
#endif
void Z_Free( void *ptr );
void Z_FreeTags( int tag );
int Z_AvailableMemory( void );
void Z_LogHeap( void );

其中分配内存的函数有三个,对应DEBUG模式和RELEASE模式。释放接口有两个,Z_Free用于释放指定起始地址的内存,Z_FreeTags释放指定标签的内存。Z_AvailableMemory用于查询当前池内可用内存。Z_LogHeap用于Dump内存池的使用信息,包括例如哪个文件哪一行请求了多大的内存,标签值等等信息。

分配和释放

其他的还有一些小的函数就不逐一分析了,这里主要分析当中的malloc和free部分。也是这个内存池的核心。
首先看malloc
代码我不全贴了,分析几个关键点

/*
================
Z_TagMalloc
================
*/
#ifdef ZONE_DEBUG
void *Z_TagMallocDebug( int size, int tag, char *label, char *file, int line ) {
#else
void *Z_TagMalloc( int size, int tag ) {
#endif
    int     extra, allocSize;
    memblock_t  *start, *rover, *new, *base;
    memzone_t *zone;
    ...
    // 这段是查找所有的内存块,直到找到第一个满足大小的block用作分配
    do {
        if (rover == start) {
#ifdef ZONE_DEBUG
            Z_LogHeap();
#endif
            // scaned all the way around the list
            Com_Error( ERR_FATAL, "Z_Malloc: failed on allocation of %i bytes from the %s zone",
                                size, zone == smallzone ? "small" : "main");
            return NULL;
        }
        if (rover->tag) {
            base = rover = rover->next;
        } else {
            rover = rover->next;
        }
    } while (base->tag || base->size < size);
    ...
    // 如果分配后,剩余的内存大于最小内存块的划分,就再分一个新的block出来(这样可以保证浪费会小于64字节)
    extra = base->size - size;
    if (extra > MINFRAGMENT) {
        // there will be a free fragment after the allocated block
        new = (memblock_t *) ((byte *)base + size );
        new->size = extra;
        new->tag = 0;           // free block
        new->prev = base;
        new->id = ZONEID;
        new->next = base->next;
        new->next->prev = new;
        base->next = new;
        base->size = size;
    }

以上是内存分配的基本内容。

内存释放

/*
========================
Z_Free
========================
*/
void Z_Free( void *ptr ) {
    memblock_t  *block, *other;
    memzone_t *zone;
    ...
    // 总大小减去释放的size,并且标记block空闲
    zone->used -= block->size;
    // set the block to something that should cause problems
    // if it is referenced...
    Com_Memset( ptr, 0xaa, block->size - sizeof( *block ) );

    block->tag = 0;     // mark as free
    // 这一块就很关键了,释放之后,检查该block的前一块内存以及后一块内存,如果都是空闲的话,就合并内存块。并且标记了下一个检索的位置
     other = block->prev;
    if (!other->tag) {
        // merge with previous free block
        other->size += block->size;
        other->next = block->next;
        other->next->prev = other;
        if (block == zone->rover) {
            zone->rover = other;
        }
        block = other;
    }

    zone->rover = block;

    other = block->next;
    if ( !other->tag ) {
        // merge the next free block onto the end
        block->size += other->size;
        block->next = other->next;
        block->next->prev = block;
        if (other == zone->rover) {
            zone->rover = block;
        }
    }

以上就是quake3中zone memory allocation的主要内容了。

上一篇 下一篇

猜你喜欢

热点阅读