Linux中的位图

什么是位图

位图(bitmap)的定义

  • 维基百科中关于位图的介绍:

一种数据结构,代表了有限域中的稠集(dense set),每一个元素至少出现一次,没有其他的数据和元素相关联。在索引、数据压缩等方面有广泛应用。

  • 自己的理解
    位图就是按位(bit)来记录、索引某个对象状态的图表(map),即用每一位(bit)来存放每一个对象的某种状态(例如分别用0和1表示的话,可以表示同一对象的两种状态)。

这在数据规模大、而数据状态又不是很多的情况下,用来索引判断某个数据的状态(如存不存在、有没有被使用等)很方便。

Linux内核中的位图

位图接口的声明

位图在Linux内核中被大量使用。下面的源代码文件包含这些位图结构的通用接口:

  • lib/bitmap.c
  • include/linux/bitmap.h

除了这两个文件,还有一个特定的架构头文件,对特定架构的位运算进行优化。对于x86_64架构,使用下面头文件:

  • arch/x86/include/asm/bitops.h

在Linux内核中,位图是一个unsigned long类型的数组。因此,一个位图可以简单地声明为:

unsigned long my_bitmap[16];  /* 声明一个16比特的位图 */

它就像这个样子:

位图示例

将数据【5,1,7,15,0,4,6,10】存入后,结构变为:


置位操作

实际上,在Linux内核中有一个专门的DECLARE_BITMAP宏来声明位图(该宏位于头文件include/linux/types.h中):

#define DECLARE_BITMAP(name,bits)  
      unsigned long name[BITS_TO_LONGS(bits)]

其中,参数name是位图的名字,bits是位图中比特的总数目。

Linux内核源码中对位图的介绍:

  19 /*
  20  * bitmaps provide an array of bits, implemented using an an
  21  * array of unsigned longs.  The number of valid bits in a
  22  * given bitmap does _not_ need to be an exact multiple of
  23  * BITS_PER_LONG.
  24  *
  25  * The possible unused bits in the last, partially used word
  26  * of a bitmap are 'don't care'.  The implementation makes
  27  * no particular effort to keep them zero.  It ensures that
  28  * their value will not affect the results of any operation.
  29  * The bitmap operations that return Boolean (bitmap_empty,
  30  * for example) or scalar (bitmap_weight, for example) results
  31  * carefully filter out these unused bits from impacting their
  32  * results.
  33  *
  34  * These operations actually hold to a slightly stronger rule:
  35  * if you don't input any bitmaps to these ops that have some
  36  * unused bits set, then they won't output any set unused bits
  37  * in output bitmaps.
  38  *
  39  * The byte ordering of bitmaps is more natural on little
  40  * endian architectures.  See the big-endian headers
  41  * include/asm-ppc64/bitops.h and include/asm-s390/bitops.h
  42  * for the best explanations of this ordering.
  43  */

位图的两个重要操作

置位(set bit)和清零(clear bit)是位图的两种重要的操作,在头文件arch/x86/include/asm/bitops.h实现了这些操作。在这两类操作中,每个函数分两种类型:原子类型和非原子类型。非原子类型的实现比较简单,介绍如下:

置位操作

/**
 * __set_bit - Set a bit in memory
 * @nr: the bit to set (位图中的比特数目)
 * @addr: the address to start counting from (位图中某个比特需要设值的地址)
 *
 * Unlike set_bit(), this function is non-atomic and may be reordered.
 * If it's called on the same region of memory simultaneously, the effect
 * may be that only one operation succeeds.
 */
static inline void __set_bit(long nr, volatile unsigned long *addr)
{
    asm volatile("bts %1,%0" : ADDR : "Ir" (nr) : "memory");
}

在该函数中,指令bts用来选择位图中的某个比特值 来作为首个操作数,然后将已选择的比特值 存入寄存器CF标签中,并设置此比特位。

清零操作

static inline void __clear_bit(long nr, volatile unsigned long *addr)
{
    asm volatile("btr %1,%0" : ADDR : "Ir" (nr));
}

该函数用来清除某个地址的某个比特值。
指令btr与指令bts类似,选择某个比特值作为首个操作数,然后将其值存入寄存器CF标签中,并清除位图中的这个比特值,并且将位图作为指令的第二个操作数。

位图在Ext2文件系统中的应用

Ext2文件系统结构图示意如下:


ext2文件系统结构示意图

在Ext2文件系统中,采用了位图来存储信息的结构有:

  • 组描述符表(GDT,Group Descriptor Table,可用df命令查看)
  • 块位图(Block Bitmap)
  • inode位图(inode Bitmap)

各项具体含义参考文章

查找文件流程

以查找/home/slot目录下的文件myfile为例,该文件的完整路径就是/home/slot/myfile,系统首先从根目录/开始查找,根目录/的inode编号固定为2

根目录的inode编号

在根目录/下的目录项中查找名字为home的目录:

根目录下的文件信息

实际上目录文件的结构非常简单,就是一系列目录项(dirent)的列表。每个目录项由以下几部分组成:

  • 所包含文件的文件名;
  • 文件名对应的inode编号
  • 文件类型;
  • 记录长度。

接下来根据文件名找到其对应的inode编号:

home对应的inode编号

(同理依次找到目录slot下文件myfile的inode编号。)
再接下来,根据inode编号,查看inode table,找到具体的inode,inode中记录了两类信息:

  • 文件属性;
  • 文件指针。

其中,文件指针指向磁盘上的数据块(data block),文件的具体信息就存储在这些block上。所以,最终根据这些文件指针找到文件内容。

注意:
最后三个文件指针都是间接指针,指向间接寻址块(Indirect Block)(一级、二级、三级间接寻址),而非数据块。

整个流程如下图所示:


文件寻址流程

删除文件流程

当使用命令 rm filename 删除一个文件时,系统实际上是删除了其inode编号,具体是每调用一次 rm filename 命令,就将filename对应的inode编号的硬连接数减一(并删除相应目录下的目录项),当硬连接数减为0时系统才释放该inode编号,以待分配给其它新的文件使用。

系统每次分配inode编号,是从所有可用的inode编号中选择最小的那个。

当然,在删除inode编号之前,系统要先释放数据块(即将bitmap中对应的位清零)。

所以,使用rm命令实际上只是删除了文件的inode编号(这也是为什么一般删除操作都很快),而文件数据仍然存放在磁盘上,只是无法再查看到。因此,只要找到文件对应的inode信息,就可以将文件内容恢复出来(前提是这些数据block没有被后来的其它数据所覆盖。所以在误删文件后,应立即停止所有写操作,以防止原有数据被覆盖)。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 158,233评论 4 360
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,013评论 1 291
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,030评论 0 241
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,827评论 0 204
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,221评论 3 286
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,542评论 1 216
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,814评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,513评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,225评论 1 241
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,497评论 2 244
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 31,998评论 1 258
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,342评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 32,986评论 3 235
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,055评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,812评论 0 194
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,560评论 2 271
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,461评论 2 266

推荐阅读更多精彩内容