持久化数据库实现:确保数据持久性与可靠性

我们的数据库能让你轻松插入和读取数据,但这些数据仅在程序运行时有效。一旦程序终止或重启,所有数据都将消失。然而,我们期望的数据库行为并非如此。以下是一个关于数据持久化的spec测试:

持久化的需求 :我们期望数据库能够在关闭连接后继续保留数据,这需要持久化保存至磁盘。

测试描述:"在关闭连接后,数据仍能得以保留。"

执行流程:

  1. 运行脚本,执行".exit"命令,关闭数据库连接。

  2. 验证结果,确保输出中包含"db > Executed."和"db > "两部分内容。

在后续的测试中,我们将看到如何实现数据持久化到磁盘,确保即使程序终止或重启,数据也能得以保留。

持久化实现方法 :采用类似序列化行数据的方式,将内存中的数据块写入文件,确保在程序重启时数据依然有效。

"Executed."

"db> "

end

◆ 持久化与SQLite

与SQLite相似,我们采用持久化技术,将整个数据库保存至单一文件中。我们已将行数据序列化为适当大小的内存块。为增强数据库的持久性,我们仅需将这些内存块写入文件,并在程序重启时从文件中读取。

  1. 持久化技术及实现
2.1 ◆ 持久化结构解析

我们的程序与SQLite架构的契合之处在于其数据访问方式。当表对象需要数据页时,它会通过pager进行请求。pager不仅访问页缓存,还与文件进行交互。以下是相关数据结构的简化描述:

```c

typedef struct {

复制代码
int file\_descriptor;

uint32\_t file\_length;

void pages[TABLE\_MAX\_PAGES];

} Pager;

typedef struct {

复制代码
void pages[TABLE\_MAX\_PAGES];

Pager pager;

uint32\_t num\_rows;

} Table;

```

pager抽象层设计 :pager提供了一个访问页缓存的接口,其中同时具备缓存命中与未命中处理逻辑。

  1. 代码实现细节
3.1 ◆ 打开和关闭数据库

打开数据库时,我们需要创建 Pager 对象,并初始化数据结构。我们重命名了new_table()函数为db_open(),以更清晰地反映其功能。打开连接的过程包括:打开数据库文件、初始化pager数据结构以及初始化table数据结构。以下是简化后的new_table()函数实现:

```c

Tabledb_open(const char filename) {

复制代码
Pager pager = pager\_open(filename);

uint32\_t num\_rows = pager->file\_length / ROW\_SIZE;

// ... 其他必要的初始化步骤 ...

}

```

页缓存刷新机制 :在关闭数据库时,需将页缓存刷新到磁盘,以保证数据持久性。这包括写回缓存到磁盘,然后关闭文件,最后释放相关资源。

3.2 ◆ 执行关闭数据库及代码逻辑

测试案例:在这些测试中,我们将提供一个数据库文件名,然后尝试执行几个数据库命令,例如选择操作,并在关闭连接后,验证数据仍然存在。

db_close()方法会在用户退出时执行以下操作:刷新页缓存到磁盘、关闭数据文件以及释放Pager和table数据结构的内存。

关闭数据库的逻辑

  • 执行关闭命令(如".exit")。

  • 刷新缓存到磁盘,以确保所有数据被保存。

  • 关闭数据库文件。

  • 释放所有的资源。

  1. 数据库测试及关闭
4.1 ◆ 测试案例

为了验证持久化实现后数据在关闭连接后仍可保留,我们将执行一系列测试。首先,使用终端模拟数据库操作:

执行以下命令:

```bash

./db mydb.db

```

数据库操作执行完毕后,再次执行相同命令,验证数据的一致性。

4.2 ◆ 关闭数据库及代码逻辑

在我们的实现中,关闭数据库连接的过程不仅会执行关闭命令,还会处理缓存刷新、文件关闭以及资源释放等操作。这将确保断电或系统崩溃时,数据库的完整性得到保护。

在上述代码中,我们处理了数据库文件的关闭逻辑,并引入了do\_meta\_command函数,该函数允许我们通过输入命令来执行必要的数据库关闭和清理操作。

相关推荐
YOU OU11 小时前
Redis基础常识与命令
数据库·redis·缓存
腻害兔11 小时前
【若依项目-产品经理视角】深度拆解 RuoYi-Vue-Pro 商城模块:从商品管理到交易引擎,50 张表撑起一整套电商系统
java·大数据·vue.js·产品经理·ai编程
码智社12 小时前
AES加密原理详解及Java实现加解密实战
java·开发语言
萧瑟余晖13 小时前
JDK 26 新特性详解
java·开发语言
Database_Cool_13 小时前
OLTP 和 OLAP 区别详解:分析型数据库和事务型数据库怎么选(附阿里云 AnalyticDB MySQL 选型指南)
数据库·mysql·阿里云
爱写代码的阿森14 小时前
鸿蒙三方库 | harmony-utils之KvUtil键值型数据库操作详解
数据库·华为·harmonyos·鸿蒙·huawei
马优晨14 小时前
Freemarker 完整讲解(后端 Java 模板引擎)
java·开发语言·freemarker·freemarker 完整讲解·freemarker模板引擎
Database_Cool_14 小时前
单机 MySQL 迁移到分布式数据库方便吗?阿里云 PolarDB-X 100% MySQL 协议兼容零改造平滑迁移
数据库·分布式·mysql
姜太小白15 小时前
【MySQL】 索引优化实战:解决 WHERE 等值 + IS NULL 查询,TEXT 字段报错 1167 的完整指南
数据库·mysql