STL空间配置器(一级配置器及二级配置器)

2023-05-16

前言

在我们日常使用STL中的容器时,我们是几乎感受不到空间配置器的存在,因为他一直在默默工作,我们在之前的这一篇博客中也大概介绍过:C++(21)——vector及实现自定义vector以及allocator和iterator空间配置器,整个STL的操作对象都存放在容器之后。而容器需要配置空间以放置资料,这也就是空间配置器的作用。

:STL提供了自定义空间配置器的接口,但是不建议自己定义,因为系统提供的空间配置器是足够安全且高效的,所以在我们使用时,一般会使用默认的配置器。

template<class T,class Alloc = allocator<T>>

空间配置器的基本原理

为了精密分工,STL将new和delete分别的两阶段动作分开

  • 内存配置操作由成员函数allocate()负责
  • 内存释放操作由成员函数deallcate()负责。
  • 对象构造操作由成员函数construct()负责
  • 对象析构操作由成员函数destroy()负责

内存分配过程中需要考虑的问题:

  1. 小块内存带来的内存碎片问题
  2. 小块内存频繁申请释放带来的性能问题

解释内存碎片问题是指;单从分配的角度来看。由于频繁分配、释放小块内存容易在堆中造成外碎片(极端情况下就是堆中空闲的内存总量满足一个请求,但是这些空闲的块都不连续,导致任何一个单独的空闲的块都无法满足这个请求)。

为了解决该类问题,STL设计了双层级配置器,也就是第一级配置器和第二级配置器

  • 第一级配置器直接使用malloc和free;

  • 第二级配置器则视情况采用不同的策略:
  • ①当配置区块大于128bytes,将其视作足够大,便调用第一级配置器;
  • ②当配置区块小于128bytes,将其视作过小,为降低额外负担,便采用内存池的管理方式

解释内存池的思想:一次向heap申请一块很大的内存(内存池),如果申请小块内存的话就直接到内存池中去要。这样的话,就能够有效的解决上面所提到的问题。

具体讲解

一级配置器

在这里插入图片描述

SGI(STL的版本)的第一级配置器以mallocfreerealloc等C函数执行实际的内存配置,释放,重配置操作,当malloc或者realloc调用不成功时,改为调用malloc_alloc_oom_malloc或者malloc_alloc_oom_realloc,它俩都有内循环,不断调用,期望在某次调用之后,获得足够的内存,但是如果“内存不足的这个处理例程”未被客户端设定,则直接抛出bad_alloc异常,或者终止程序。

注意—— 设计内存不足处理例程和设定内存不足处理例程都是客户端的责任。

二级配置器

二级配置器使用内存池+自由链表的形式避免了小块内存带来的碎片化,提高了内存分配的效率以及内存利用率


不要忘了前面说的:只有要申请的空间小于128bytes时才会调用二级空间配置器


二级配置器的大致结构

在这里插入图片描述

在图中,我们看到一共有16个free-list,从第一个开始每一个链表管理的区块分别是:8,16,24,32,40,48,56,64,72,80,88,96,104,112,120,128字节的小额区块。


free-list结点定义如下:

 union obj {
        union obj* free_list_link;
        char client_data[1];    /* The client sees this.*/
  };

想想union的特性:union节省了内存,这样每个结点就不需要额外的指针。


注意:如果用户申请的内存大小不是8的倍数,二级配置器会将申请的字节数上调至距离用户申请大小的最近的8的倍数处。(这里带来了内碎片问题,和之前谈到的外碎片问题相比,这个问题我们无法避免


问题: 内存块为什么必须要以8位单位呢,把1作为单位不就可以避免这个问题了吗?
——我们的内存块是像链表一样连接起来的,这样就必然需要指针来维护, 32位平台下指针4字节,64位平台下指针8字节,所以内存块最小也要能存放一个指吧,这样就清楚了为什么是8字节。


二级配置器是以内存池管理的,每次从系统中配置一大块内存,并维护与之对应的自由链表free-list

  • 如果用户申请内存,有相同大小的需要就直接从free-list中分配。
  • 如果用户归还内存时,将根据归还内存快的大小,将需要归还的内存插入到对应free-list的最顶端。

场景1:free-list中存在对应的内存块
假设我们申请32bytes空间根据FREELIST_INDEX函数找到对应下标3,即应该在free_list[3]中取区块,而且这时free_list[3]中有内存,我们就将第一个内存块返回给用户,并调整指针指向后面的内存块。
在这里插入图片描述
场景2:free-list中没有对应的内存块

  • 假设我们申请72bytes空间的大小,此时free-list中没有对应的内存块,这时候就需要调动refill函数向内存池申请填充free-list了。
  • 假设内存池中也没有空间,这时候就需要配置heap空间来补充内存池,此时调用了函数chunk_alloc

综合上面的一些情况,我们来做一个总结:

二级配置器的内存分配

  1. free_list列表中有空余内存。如果申请3个字节的内存,则所需空间大小提升为8的倍数,然后去 free_list中查找相应的链表,如果 free_list[i] 不为空,则返回第一个元素,然后把头指针往后移。
  2. free_list列表中没有空余,但内存池不为空。首先检验内存池中的大小是不是比申请的内存大,比如申请20*8的内存,如果足够,则分配相应内存,将其中一个分配给用户使用,其它的挂在相应的free_list 中。如果内存池不够大,只够几个内存分配,则就分配这几个,把相应的数据返回。如果连一个都不够则执行第三中情况。
  3. free_list列表中没有空余,内存池也不够。调用malloc重新分配内存,分配时会多分配一倍的内存,把相应的内存挂到free_list下,剩余的放到内存池中。
  4. free_list列表中没有空余,内存池也不够,malloc也失败。则调用一级空间配置器,里面会有循环处理,或者抛出异常。

总结

  1. 内存碎片的问题,自由链表所挂区块都是8的整数倍,因此当我们需要非8倍数的区块,往往会导致浪费
  2. 我们并没有释放内存池中的区块。释放需要到程序结束之后。这样子会导致自由链表一直占用内存,其它进程使用不了。
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

STL空间配置器(一级配置器及二级配置器) 的相关文章

随机推荐

  • Mysql(14)——事务

    概念 一个事务是由一条或者多条对数据库操作的SQL语句所组成的一个不可分割的单元 只有当事务中的所有操作都正常执行完了 xff0c 整个事务才会被提交给数据库 xff1b 如果有部分事务处理失败 xff0c 那么事务就要回退到最初的状态 x
  • Mysql(15)——锁机制 + MVCC(全)

    前言 事务的隔离级别在之前我们已经学习过 xff0c 那么事务隔离级别的实现原理是什么呢 xff1f 锁 43 MVCC 下面我们就来分开讲解 xff1a 表级锁 amp 行级锁 注意 xff1a 表锁和行锁说的是锁的粒度 xff0c 不要
  • DIY无人机组装与飞控参数调试记录(DJI NAZA-LITE)

    早就想玩一玩无人机 xff0c 奈何各种原因一直没有机会 xff0c 工作之后资金富足 xff0c 加上本身工作和这个相关性比较大 xff0c 于是就自己DIY了一台无人机 一 材料准备 xff1a F450机架 GPS支架 好盈乐天 20
  • Mysql(16)——日志

    前言 我们之前了解过redo log和undo log xff0c 他们是作用在InnoDb存储引擎层的 xff0c 今天我们来讲讲服务层的其他日志类型 一 错误日志 错误日志是 MySQL 中最重要的日志之一 xff0c 它记录了当 my
  • Mysql(17)——优化

    前言 一 SQL和索引优化 二 应用优化 除了优化SQL和索引 xff0c 很多时候 xff0c 在实际生产环境中 xff0c 由于数据库服务器本身的性能局限 xff0c 就必须要对上层的应用来进行一些优化 xff0c 使得上层应用访问数据
  • 项目——C++实现数据库连接池

    前言 在学习Mysql的时候 xff0c 我们都有这个常识 xff1a 对于DB的操作 xff0c 其实本质上是对于磁盘的操作 xff0c 如果对于DB的访问次数过多 xff0c 其实就是涉及了大量的磁盘IO xff0c 这就会导致MYsq
  • Redis入门——发展历程及NoSQL

    前言 随着社会的发展 xff0c 数据存储经历了诸多的过程 xff0c 这篇文章就是介绍Redis的发展由来 xff1a 1 单机Mysql时代 这种模式存在以下的瓶颈 xff1a 数据量太大 xff0c 一个机器存放不下数据的索引太大 x
  • Redis(1)——基本命令及数据类型(5+3)

    Redis的基本概念 Remote Dictionary Server xff1a 远程字典服务Redis 是一个开源 xff08 BSD许可 xff09 的 xff0c 内存中的数据结构存储系统 xff0c 它可以用作数据库 缓存和消息中
  • Redis(2)——事务机制

    Redis的事务机制 Redis的事务本质 xff1a 一组命令的集合一个事务中的所有命令都会都被序列化 xff0c 在事务执行的过程中 xff0c 会按照顺序执行 xff01 一次性 顺序性 排他性 执行一系列的命令Redis没有事务隔离
  • Redis(3)—— 持久化、发布订阅

    持久化 Redis是内存数据库 xff0c 如果不将内存中的数据库状态保存到磁盘中 xff0c 那么一旦服务器进程退出 xff0c 服务器中的数据库状态也会消失 所以Redis提供了持久化的功能 1 RDB xff08 Redis Data
  • Redis(4)——主从复制

    Redis主从复制 主从复制 xff1a 指的是将一个Redis服务器的数据 xff0c 复制到其他的Redis服务器 前者称为主节点 xff08 master leader xff0c 后者称为从节点 xff08 slave follow
  • Redis(5)——缓存穿透和雪崩

    概要 Redis缓存的使用 xff0c 极大的提高了应用程序的性能和效率 xff0c 特别是数据查询等 但同时 xff0c 它也带来了一些问题 其中 xff0c 最主要的问题就是数据一致性 xff0c 从严格意义上来讲 xff0c 这个问题
  • 复习:结构体大小的内存对齐问题

    内存对齐 内存对齐是指 xff1a 任意单个类型的数据都需要存放在能被它本身大小所能整除的地址上 基本类型的大小 char 1 short 2 int 4 long 4 long long 8 float 4 double 8 指针 4 8
  • 0.一些自己初学Solidworks的疑惑

    1 为什么要选择学习SolidWorks 首先 作为初学者 我们对一个东西并不是很了解 那么就需要别人来教我们 对吧 这些人可以是老师 可以是同学 可以是师傅 可以是网络上热心肠的大神 可以是一些培训机构 等等 首先呢 学习三维设计软件 看
  • LInux——五种IO模型

    Linux中的IO简述 IO主要分为以下的三种 xff1a 内存IO网络IO磁盘IO 通常我们所说的IO是后两者 xff0c Linux中无法直接操作IO设备 xff0c 必须通过系统调用请求kernal来协助完成IO的动作 xff0c 内
  • 复习:Linux中的软连接和硬连接

    前言 首先我们先来复习以下Linux的文件系统 Linux的文件系统是EXT4 以EXT4文件系统格式化磁盘时 xff0c 将磁盘分成了三个区 xff0c 分别是 xff1a 1 superblock xff1a 记录文件系统的整体信息 x
  • 复习:字节对齐的原则

    为什么需要字节对齐 xff1f 现代计算机中内存空间都是按照byte划分的 xff0c 从理论上讲似乎对任何类型的变量的访问可以从任何地址开始 xff0c 但实际情况是在访问特定类型变量的时候经常在特定的内存地址访问 xff0c 这就需要各
  • Reactor模型

    前言 首先让我们来回顾一下select poll和epoll是如何获取网络事件的 xff1a 在获取事件时 xff0c 先把我们要关心的连接传给内核 xff0c 再由内核检测 xff1a 若没有事件发生 xff0c 线程只需阻塞在这个系统调
  • Proactor模型

    前言 上一篇讲解的Reaactor是非阻塞的同步网络模式 xff0c 而Proactor是异步网络模式 至于异步IO怎么理解 xff1a 可以参考我的这一篇博客 xff1a Linux的五种IO模型 理解之后 xff1a 你就会感受到 xf
  • STL空间配置器(一级配置器及二级配置器)

    前言 在我们日常使用STL中的容器时 xff0c 我们是几乎感受不到空间配置器的存在 xff0c 因为他一直在默默工作 xff0c 我们在之前的这一篇博客中也大概介绍过 xff1a C 43 43 xff08 21 xff09 vector