Postgresql架构体系解析

一、PostgreSQL物理架构

postgresql的物理架构非常简单，它由共享内存、一系列后台进程和数据文件组成。 

 

 二、Shared Memory

共享内存是服务器服务器为数据库缓存和事务日志缓存预留的内存缓存空间。其中最重要的组成部分是Shared Buffer和WAL Buffer。

• Shared Buffer：是数据页缓冲区。Shared Buffer的目的是减少磁盘IO，大部分oltp工作负载都是随机IO,因此从磁盘获取非常慢。为了解决这个问题，postgre将数据缓存在RAM中，来提高性能。对于shared_buffers，没有一个特定的推荐值。但是一般来说，对于专用DB服务器，shared_buffers的值应该大约是系统总RAM的25%。

• WAL Buffer：是预写日志(wal)缓冲区。在备份和恢复的场景下，WAL Buffer和WAL文件是极其重要的。如果要调优的系统有大量并发连接，那么wal_buffers的值越高，性能越好。

三、PostgreSQL 进程类型

PostgreSQL有四种进程类型

1. Postmaster (Daemon) Process（主后台驻留进程）
2. Background Process（后台进程）
3. Backend Process（后端进程）
4. Client Process（客户端进程）

• Postmaster Process：PostgreSQL启动时第一个启动的进程。启动时，他会执行恢复、初始化共享内存的运行后台进程操作。运行期间，当有客户端发起链接请求时，它还负责创建后端进程。

 

 如果通过pstree命令查看进程之间的关系，你会发现Postmaster进程是其他所有进程的父进程。

• Background Process

 

进程	作用
logger	将错误信息写到log日志中
checkpointer	当检查点出现时，将脏内存块写到数据文件
writer	周期性的将脏内存块写入文件
wal writer	将WAL缓存写入WAL文件
Autovacuum launcher	当自动vacuum被启用时，用来派生autovacuum工作进程。autovacuum进程的作用是在需要时自动对膨胀表执行vacuum操作。
archiver	在归档模式下时，复制WAL文件到特定的路径下。
stats collector	用来收集数据库统计信息，例如会话执行信息统计（使用pg_stat_activity视图）和表使用信息统计（pg_stat_all_tables视图）

• Backend Process

　　最大后台链接数通过max_connections参数设定，默认值为100。后端进程用于处理前端用户请求并返回结果。查询运行时需要一些内存结构，就是所谓的本地内存（local memory）。本地内存涉及的主要参数有：

1. work_mem：用于排序、位图索引、哈希链接和合并链接操作。默认值为4MB。
2. maintenance_work_mem：用于vacuum和创建索引操作。默认值为64MB。
3. temp_buffers：用于临时表。默认值为8MB。

• Client Process

　　客户端进程需要和后端进程配合使用，处理每一个客户链接。通常情况下，Postmaster进程会派生一个子进程用来处理用户连接。

四、数据库结构

数据库相关概念：

1. PostgreSQL由一系列数据库组成。一套PostgreSQL程序称之为一个数据库群集。
2. 当initdb()命令执行后，template0 , template1 , 和postgres数据库被创建。
3. template0和template1数据库是创建用户数据库时使用的模版数据库，他们包含系统元数据表。
4. initdb()刚完成后，template0和template1数据库中的表是一样的。但是template1数据库可以根据用户需要创建对象。
5. 用户数据库是通过克隆template1数据库来创建的；

表空间相关概念：

1. initdb()后马上创建pg_default和pg_global表空间。
2. 建表时如果没有指定特定的表空间，表默认被存在pg_default表空间中。
3. 用于管理整个数据库集群的表默认被存储在pg_global表空间中。
4. pg_default表空间的物理位置为$PGDATA\base目录。
5. pg_global表空间的物理位置为$PGDATA\global目录。
6. 一个表空间可以被多个数据库同时使用。此时，每一个数据库都会在表空间路径下创建为一个新的子路径。
7. 创建一个用户表空间会在$PGDATA\pg_tblspc目录下面创建一个软连接，连接到表空间制定的目录位置。

表相关概念：

1. 每个表有三个数据文件。
2. 一个文件用于存储数据，文件名是表的OID。
3. 一个文件用于管理表的空闲空间，文件名是OID_fsm。
4. 一个文件用于管理表的块是否可见，文件名是OID_vm。
5. 索引没有_vm文件，只有OID和OID_fsm两个文件