Postgresql运维信息(一)

news/2024/7/9 22:18:29 标签: postgresql, 运维, 数据库

1. 运维系统视图

PostgreSQL 提供了一系列系统视图和函数,可以用于获取数据库运维统计信息。这些信息对于监控和优化数据库性能非常有用。以下是一些常用的 PostgreSQL 运维统计信息:

1.1. pg_stat_activity

这个系统视图包含了当前数据库连接的活动信息,例如正在执行的查询、连接的用户、查询开始时间等。

SELECT * FROM pg_stat_activity;

pg_stat_activity 是一个系统视图,用于显示当前正在连接到 PostgreSQL 数据库的会话信息和活动查询的详细信息。这个视图提供了有关每个当前数据库连接的一些重要信息,方便进行监控和性能调优。

字段名描述详细描述
datid数据库 OID当前数据库的对象标识符(OID)。
datname数据库连接所在的数据库名称。
pid进程 ID当前会话后端进程的标识符。
usesysid用户 OID连接的用户的对象标识符(OID)。
usename用户名连接的用户名。
application_name应用程序名建立连接的应用程序的名称。
client_addr客户端地址连接到 PostgreSQL 的客户端的IP地址。
client_hostname客户端主机名连接到 PostgreSQL 的客户端的主机名。如果无法解析主机名,则显示IP地址。
client_port客户端端口客户端连接到 PostgreSQL 的端口号。
backend_start后端启动时间后端进程启动的时间戳。
xact_start事务启动时间最近一次事务开始执行的时间戳。
query_start查询启动时间最近一次查询开始执行的时间戳。
state连接状态连接的当前状态。可能的值包括 “活动”、“空闲”、“等待” 等。
state_change状态变更时间最近一次连接状态发生变化的时间戳。
wait_event_type等待事件类型如果连接处于等待状态,表示正在等待的事件的类型。可能的值包括 “IO”、“Lock” 等。
wait_event等待事件名称如果连接处于等待状态,表示正在等待的具体事件名称。

1.2. pg_stat_database

这个系统视图包含了有关每个数据库的统计信息,例如数据库的大小、连接数、提交和回滚次数等。

SELECT * FROM pg_stat_database;

pg_stat_database 是一个 PostgreSQL 的系统视图,提供了关于每个数据库的统计信息。以下是 pg_stat_database 视图中一些重要字段的含义:

字段名描述详细描述
datid数据库 OID每个数据库的唯一标识符(OID)。
datname数据库名称连接所在的数据库名称。
numbackends活动连接数当前数据库的活动连接数。
xact_commit提交事务数量数据库启动以来的提交事务数量。
xact_rollback回滚事务数量数据库启动以来的回滚事务数量。
blks_read从磁盘读取的块数数据库启动以来从磁盘读取的块数量(8KB 块)。
blks_hit从缓存读取的块数数据库启动以来从缓存读取的块数量(8KB 块)。
tup_returned检索的行数数据库启动以来检索的行数。
tup_fetched获取的行数数据库启动以来获取的行数。
tup_inserted插入的行数数据库启动以来插入的行数。
tup_updated更新的行数数据库启动以来更新的行数。
tup_deleted删除的行数数据库启动以来删除的行数。
conflicts冲突数数据库启动以来发生的冲突数。
temp_files创建的临时文件数数据库启动以来创建的临时文件数。
temp_bytes使用的临时空间字节数数据库启动以来使用的临时空间的字节数。
deadlocks死锁数数据库启动以来发生的死锁数。

1.3. pg_stat_user_tables 和 pg_stat_user_indexes

这两个系统视图分别提供了用户表和索引的统计信息,包括行数、更新次数、索引扫描次数等。

SELECT * FROM pg_stat_user_tables;
SELECT * FROM pg_stat_user_indexes;

1.3.1. pg_stat_user_tables

pg_stat_user_tables 视图是 PostgreSQL 提供的一个系统视图,用于提供关于用户表的统计信息。它包含了与用户表相关的各种统计数据,帮助用户监视和分析数据库中表的活动情况和性能指标。

以下是针对 pg_stat_user_tables 视图字段的详细描述

字段名描述详细描述
relid表的 OID表示统计信息相关的表的对象标识符。
schemaname模式名称表所在模式的名称。
relname表名称表的名称。
seq_scan顺序扫描的次数数据库重启以来执行顺序扫描的次数。
seq_tup_read通过顺序扫描读取的行数数据库重启以来通过顺序扫描读取的行数。
idx_scan索引扫描的次数数据库重启以来执行索引扫描的次数。
idx_tup_fetch通过索引扫描获取的行数数据库重启以来通过索引扫描获取的行数。
n_tup_ins插入的行数数据库重启以来插入的行数。
n_tup_upd更新的行数数据库重启以来更新的行数。
n_tup_del删除的行数数据库重启以来删除的行数。
n_tup_hot_upd热更新的行数数据库重启以来进行热更新的行数。
n_live_tup当前存活的行数当前存在的未标记为删除的行数。
n_dead_tup当前死亡的行数当前被标记为删除但尚未被清理的行数。
last_vacuum最后一次 VACUUM 执行的时间表最后一次执行 VACUUM 操作的时间。
last_autovacuum最后一次自动 VACUUM 执行的时间表最后一次自动执行 VACUUM 操作的时间。
last_analyze最后一次 ANALYZE 执行的时间表最后一次执行 ANALYZE 操作的时间。
last_autoanalyze最后一次自动 ANALYZE 执行的时间表最后一次自动执行 ANALYZE 操作的时间。
vacuum_countVACUUM 操作的计数数据库重启以来执行 VACUUM 操作的次数。
autovacuum_count自动 VACUUM 操作的计数数据库重启以来执行自动 VACUUM 操作的次数。
analyze_countANALYZE 操作的计数数据库重启以来执行 ANALYZE 操作的次数。
autoanalyze_count自动 ANALYZE 操作的计数数据库重启以来执行自动 ANALYZE 操作的次数。

1.3.2. pg_stat_user_indexes

pg_stat_user_indexes 视图提供了有关用户创建的索引的统计信息,用于监视和分析这些索引的活动情况和性能指标。

字段名描述详细描述
relid索引所属表的 OID表示索引所属的表的对象标识符(OID)。
indexrelname索引名称索引的名称。
schemaname模式名称索引所在的模式的名称。
idx_scan索引扫描的次数数据库启动以来执行索引扫描的次数。
idx_tup_read通过索引扫描获取的行数数据库启动以来通过索引扫描读取的行数。
idx_tup_fetch通过索引扫描获取的行数数据库启动以来通过索引扫描获取的行数(通常与 idx_tup_read 类似,但在某些情况下可能会有差异)。

1.4. pg_stat_bgwriter

SELECT * FROM pg_stat_bgwriter;

pg_stat_bgwriter 视图提供了有关后台写入进程(background writer)的统计信息。这个视图包含了后台写入进程的性能指标,帮助用户监视数据库的后台写入活动情况。

字段名描述
checkpoints_timed周期性检查点的触发次数(通过时间间隔触发)
checkpoints_req请求性检查点的触发次数(通过请求触发)
checkpoint_write_time检查点写入到磁盘的时间(以毫秒为单位)
checkpoint_sync_time检查点同步到磁盘的时间(以毫秒为单位)
buffers_checkpoint由检查点写入的缓冲区数量
buffers_clean后台写入进程释放的脏数据缓冲区数量
maxwritten_clean单个检查点中释放的最大脏数据缓冲区数量
buffers_backend后台写入进程主动写入的缓冲区数量
buffers_alloc分配的共享缓冲区数量
stats_reset统计信息重置的时间戳

pg_stat_bgwriter 视图中的这些字段提供了关于后台写入进程活动的各种统计信息,例如检查点的触发次数、写入时间、缓冲区写入和释放情况等。这些信息对于监视数据库的后台写入活动并评估数据库性能非常有用。

1.5. pg_stat_replication

pg_stat_replication 是一个系统视图,用于在 PostgreSQL 中查看关于流复制(streaming replication)的统计信息。它提供了有关当前正在进行的流复制连接的统计数据,允许用户监视和管理 PostgreSQL 流复制的状态。

SELECT * FROM pg_stat_replication;
字段名描述
pid流复制进程的后端进程 ID
usesysid备库的系统标识符
usename连接流复制的用户名
application_name连接的应用程序名称
client_addr连接的客户端地址
client_hostname连接的客户端主机名
client_port连接的客户端端口号
backend_start流复制进程启动时间
state流复制连接状态
sent_location主服务器发送到流复制客户端的位置
write_location流复制客户端已写入到磁盘的位置
flush_location流复制客户端已确认已刷新到磁盘的位置
replay_location流复制客户端正在回放的位置
sync_priority流复制连接的同步优先级
sync_state流复制连接的同步状态

1.6. pg_stat_progress_vacuum

pg_stat_progress_vacuum 是一个系统视图,用于在 PostgreSQL 中查看正在执行的 VACUUM 进程的进度信息。它提供了有关正在进行的 VACUUM 操作的统计数据,允许用户监视和了解 VACUUM 操作的进度和状态。

SELECT * FROM pg_stat_progress_vacuum;
字段名描述
pidVACUUM 进程的后端进程 ID
datid正在执行 VACUUM 的数据库 OID
relid正在执行 VACUUM 的表的 OID
phaseVACUUM 操作的阶段
heap_blks_total表的总块数(以块为单位)
heap_blks_scanned已扫描的块数
heap_blks_vacuumed已清理的块数
heap_blks_index_cleaned已清理的索引块数

在 PostgreSQL 中,VACUUM 是一种重要的数据库维护操作,用于管理数据库中的空间和性能。VACUUM 主要用于以下几个方面:

  1. 释放过期的行版本空间:PostgreSQL 使用多版本并发控制(MVCC)来管理事务。当一个行被更新或删除时,旧的行版本不会立即从磁盘中删除,而是被标记为可被清理。VACUUM 会释放这些被标记为可清理的行版本所占用的空间。

  2. 更新统计信息:VACUUM 运行时会更新数据库中的统计信息,这些信息是优化查询计划的基础。更新这些统计信息有助于 PostgreSQL 优化查询,提高查询性能。

  3. 避免表空间膨胀:长时间运行的数据库操作会产生大量不再使用的空间(如删除、更新等操作会造成存储空间碎片化)。VACUUM 可以帮助回收这些空间,减少表的膨胀,使得表的存储更加紧凑。

  4. 减少事务ID的消耗:每个活动的事务都会消耗事务ID。通过清理旧的行版本和过期事务的元数据,VACUUM 可以减少事务ID的消耗。

VACUUM 是 PostgreSQL 数据库维护的一个关键操作,对于保持数据库性能和空间管理至关重要。通常,定期运行 VACUUM 是一个良好的实践,特别是在高写入负载的数据库中。

1.6.1. 如何清理 VACUUM

在 PostgreSQL 中执行 VACUUM 可以通过以下几种方式进行:

1. 手动执行 VACUUM
  • VACUUM 整个数据库:运行以下命令可以对整个数据库执行 VACUUM 操作:

    VACUUM;
    
  • VACUUM 单个表:指定表名执行 VACUUM 操作:

    VACUUM tablename;
    
2. 自动化执行 VACUUM
  • 自动化 VACUUM:可以设置自动执行 VACUUM 的策略。例如,使用 autovacuum 功能,通过配置参数 autovacuumautovacuum_vacuum_scale_factor 等来启用自动 VACUUM。
3. 在命令行执行 VACUUM
  • 通过命令行工具执行:使用命令行工具 psqlpg_ctl 来执行 VACUUM 操作。
注意事项
  • 执行 VACUUM 通常会锁定被清理的对象(表),因此在高负载的生产环境中要谨慎执行,避免对正常业务产生影响。
  • 在执行 VACUUM 的同时,建议先备份数据库以防意外情况发生。
  • 避免频繁地手动执行 VACUUM,尤其是对于活跃更新频繁的数据库,可以考虑使用自动化的 VACUUM 策略。

总的来说,VACUUM 是一个维护性的操作,可以通过命令行工具、SQL 命令或设置自动执行来管理数据库中的空间和性能。

1.7. pg_stat_progress_analyze

pg_stat_progress_analyze 是 PostgreSQL 中的一个系统视图,用于查看正在进行的 ANALYZE 操作的进度信息。它提供了关于当前 ANALYZE 操作的统计数据,允许用户监视和了解 ANALYZE 操作的执行情况。

SELECT * FROM pg_stat_progress_analyze;
字段名描述
pidANALYZE 进程的后端进程 ID
datid正在执行 ANALYZE 的数据库 OID
relid正在执行 ANALYZE 的表的 OID
phaseANALYZE 操作的阶段
heap_blks_total表的总块数(以块为单位)
heap_blks_scanned已扫描的块数
heap_blks_vacuumed已清理的块数
num_index_scans已扫描的索引数
max_tid最大的可见行版本号

http://www.niftyadmin.cn/n/5198809.html

相关文章

武汉站--ChatGPT/GPT4科研技术应用与AI绘图及论文高效写作

2023年随着OpenAI开发者大会的召开,最重磅更新当属GPTs,多模态API,未来自定义专属的GPT。微软创始人比尔盖茨称ChatGPT的出现有着重大历史意义,不亚于互联网和个人电脑的问世。360创始人周鸿祎认为未来各行各业如果不能搭上这班车…

使用Python实现几种底层技术的数据结构

使用Python实现几种底层技术的数据结构 数据结构(data structure)是带有结构特性的数据元素的集合,它研究的是数据的逻辑结构和数据的物理结构以及它们之间的相互关系,并对这种结构定义相适应的运算,设计出相应的算法,并确保经过这…

【前端知识】Node——events模块的相关方法

一、events模块的常用方法 // 事件总线 const EventsEmitter require(events);const emitter new EventsEmitter();function HLog(msg){console.log(msg); }// 监听 emitter.on(hlog, HLog);setTimeout(() > {// 触发,打印emitter.emit(hlog, hello emitter!)…

定点整数、小数

文章目录 一、定点整数二、定点小数三、定点小数的加/减运算 一、定点整数 二、定点小数 三、定点小数的加/减运算 对两个定点小数A、B进行加法/减法时,需要先转换为补码 计算机硬件如何做定点小数补码的加法:从最低位开始,按位相加&#x…

Vue:从本地加载json文件

作者:CSDN _乐多_ 本文记录了使用vue框架从本地加载json文件的代码。 文章目录 import axios from axios;try {const response await axios.get(./Apps/output.json);// this.jsonData response.data.section_list;// console.log(response, response)// consol…

java-jdbc快速入门

文章目录 简介快速入门 简介 JDBC就是使用Java语言操作关系数据库的一套APIJava DataBase Connectivity 快速入门 -- mysql 中准备工作 create database if not exists my_db; use my_db; create table account(id int,name varchar(20),money int ); insert into account v…

基于像素特征的kmeas聚类的图像分割方案

kmeans聚类代码 将像素进行聚类,得到每个像素的聚类标签,默认聚类簇数为3 def seg_kmeans(img,clusters3):img_flatimg.reshape((-1,3))# print(img_flat.shape)img_flatnp.float32(img_flat)criteria(cv.TERM_CRITERIA_MAX_ITERcv.TERM_CRITERIA_EPS,2…

LeetCode 0053. 最大子数组和:DP 或 递归(线段树入门题?)

【LetMeFly】53.最大子数组和:DP 或 递归 力扣题目链接:https://leetcode.cn/problems/maximum-subarray/ 给你一个整数数组 nums ,请你找出一个具有最大和的连续子数组(子数组最少包含一个元素),返回其最…