2024年3月26日发(作者：)

LMDB 流程

LMDB（Lightning Memory-Mapped Database）是一个内存映射型数据库，具

有非常快的读存速度。它属于Key-Value数据库，而非关系型数据库（如

MySQL）。LMDB的主要作用是将各种各样的原始数据转换为统一的Key-Value存

储，并提供数据管理功能。对于神经网络的大型数据集（如ImageNet），LMDB

可以高效地进行存储，也是Caffe框架默认的数据读取格式。

LMDB是基于内存映射的，它返回指向键和值的内存地址的指针，避免了

像大多数其他数据库那样复制内存中的任何内容，因此具有非常高的读存速

度。其文件结构包括一个数据文件和一个锁文件，文件可以随意复制和传输。

在访问数据时，LMDB使用mmap将文件只读地装载到宿主进程的地址空

间，直接访问相应的地址，减少了硬盘、内核地址空间和用户地址空间之间的

拷贝，从而提高了效率。此外，LMDB使用MVCC处理并发读写访问的问题。

在应用中，LMDB的访问非常简单，不需要单独的数据管理进程，只要在

访问数据的代码里引用LMDB库，并给出文件路径即可。这使得它在处理大量

小文件时具有优势，因为使用内存映射的方式访问文件可以大大减少文件内寻

址的开销。

基于Python语言的lmdb库的主要操作流程如下：

1. 打开环境：使用env = ()来打开LMDB数据库环境。例

如，如果你想要打开名为"students"的数据库环境，你可以这样写：env =

("students")。执行此操作后，你会在当前目录下看到一个名为

"students"的新目录，其中包含和两个文件。

2. 建立事务：通过txn = ()来建立事务。

3. 插入和修改：使用(key, value)来插入或修改数据。在这

个操作中，key是数据的键，value是对应的数据。

4. 删除：使用(key)来删除指定的数据。

5. 查询：查询单条记录可以使用(key)，它会返回与给定

key关联的值。

6. 遍历：如果需要遍历数据库，可以使用()。

7. 提交更改：最后，通过()来提交你所做的所有更改。