Entries from 2022 « 2021 / all / by tag / 2023»

ClickHouse 是一种用于 OLAP 的 列式 DBMS，其写入与查询速度都特别快，本文将简要介绍其数据存储原理。

使用 Prometheus 也有两年了，一直很好奇它是怎么存储数据的：不仅能按时间范围查询，而且还能用各种 label 值进行过滤。于是研究了下，发现原理还是挺简单的。

在上一篇文章中我们介绍了 LevelDB 的 MemDB，其中提到，MemDB 中的数据最终会持久化到文件系统中。数据分为多个文件进行存储，每个文件被称为 SSTable，本文将介绍 SSTable 的内部结构。

数据在写入 LevelDB 时，并不是立即写入磁盘，而是会先写入内存中，当内存中的数据达到一定数量时，才会写入磁盘。这些内存中的数据统一由 MemDB 来维护，包括数据写入与查询。本文将以 GoLevelDB 源码为例，介绍 MemDB 组件。

当你 INSERT 一行记录到 PostgreSQL 时，数据并不会立即写到磁盘文件中，而是会先写入 Shared Buffer，过一段时间才会落盘。同样的，当你 SELECT 一些数据时，也不会每次都会实时从磁盘文件中读取，很大概率会从 Shared Buffer 直接获取。那么 Shared Buffer 内部的结构是怎样的呢？本文将会介绍 Shared Buffer 的工作原理，逐步揭开其神秘面纱。