postgresql磁盘空间清理

原创 已于 2024-07-09 15:42:18 修改 · 5.6k 阅读 · 7
标签
#postgresql #运维
于 2022-10-28 09:38:51 首次发布
本文围绕PostgreSQL磁盘空间清理展开。介绍了VACUUM和VACUUM FULL的作用及区别，前者回收空间供表重用，后者可将未使用空间返回给操作系统。还阐述了pg_repack插件，能在线清理表空间，解决表膨胀问题，同时说明了其服务端开启、客户端安装及命令使用方法。

目录

前言

磁盘空间清理

VACUUM & VACUUM FULL

pg_repack插件

服务端开启pg_repack插件

安装pg_repack插件客户端

使用pg_repack命令清理膨胀空间

参考文档

前言

        VACUUM回收死元组占用的存储空间。在正常的PostgreSQL操作中，被更新删除或废弃的元组不会从它们的表中物理删除；它们一直存在，直到 VACUUM完成。因此有必要定期进行VACUUM，尤其是在频繁更新的表上。

磁盘空间清理

VACUUM & VACUUM FULL

  • VACUUM（不带FULL）只是回收空间并使其可供重用。这种形式的命令可以与正常的表读写并行操作，因为没有获得排他锁。但是，额外的空间不会返回给操作系统（在大多数情况下）；它只是保留在同一张表中以供重复使用。
  • VACUUM FULL将表的全部内容重写到没有额外空间的新磁盘文件中，允许将未使用的空间返回给操作系统。这种形式要慢得多，需要一个ACCESS EXCLUSIVE在处理每个表时锁定它。

pg_repack插件

        通过插件pg_repack在线清理表空间，有效解决因对全表大量更新等操作引起的表膨胀问题。pg_repack无需获取排它锁，相比CLUSTER或VACUUM FULL更加轻量化。

        pg_repack和VACUUM FULL都可以将释放的空间返回给操作系统，同样期间剩余空间要是被释放空间的两两倍。但pg_repack优势在于执行期间不影响原表的INSERT、UPDATE和DELETE。

服务端开启pg_repack插件

进入需要pg_repack的数据库，执行插件的开启/关闭。

  • 开启插件：CREATE EXTENSION pg_repack;
  • 关闭插件：DROP EXTENSION pg_repack;

安装pg_repack插件客户端

1.安装依赖环境-1

yum install postgresql* redhat-rpm-config openssl-devel readlin
最低0.47元/天 解锁文章
PostgreSQL 磁盘空间清理
修破立生
02-19 3941
PostgreSQL 删除、更新、覆写的历史数据不会从磁盘中清除，久而久之，磁盘的数据越来越多造成空间不足。使用 vacuum full 可彻底释放磁盘空间
如何诊断并解决PostgreSQL中的磁盘空间不足问题？
发现生活，分享智慧，一起成长！
04-24 1572
同时，优化复杂的查询语句，减少不必要的数据扫描和排序操作，也可以降低磁盘I/O负载。例如，你可以删除旧的、不再需要的数据行，或者对表进行VACUUM操作以回收空间。首先，你可以清理PostgreSQL的日志文件、旧的备份文件和其他不必要的文件，以释放磁盘空间。这些查询将返回按大小排序的前10个大表和大对象，你可以根据返回的结果来确定是否需要优化或清理这些对象。接下来，你可以检查PostgreSQL数据目录的大小，以确定数据库文件是否占用了过多的磁盘空间。替换为你的PostgreSQL数据目录的实际路径。
从一次磁盘爆满告警说起：我是如何通过表空间管理，给PostgreSQL数据库“瘦身”和“扩容”的
最新发布
weixin_30275415的博客
03-23 176
本文详细介绍了如何通过PostgreSQL表空间管理解决磁盘爆满问题，包括快速诊断磁盘占用、创建和迁移表空间、制定长期维护策略等实用技巧。通过合理利用表空间功能，不仅能解决存储危机，还能优化数据库性能，为未来数据增长预留空间。
PostgreSQL 如何应对数据库存储空间不足的情况？
发现生活，分享智慧，一起成长！
07-09 2602
存储空间不足是 PostgreSQL 数据库中常见的问题，但通过合理的规划、监控和优化措施，可以有效地应对这个问题。增加存储空间、清理无用数据、优化表结构、数据分区以及及时的监控和预警是解决存储空间不足的关键步骤。根据实际的业务需求和数据库环境，选择合适的方法组合，以确保数据库的稳定运行和良好性能。🎉相关推荐🍅关注博主🎗️带你畅游技术世界，不错过每一次成长机会！📚领书：PostgreSQL 入门到精通.pdf📙PostgreSQL 中文手册📘PostgreSQL 技术专栏。
GaussDB(DWS)磁盘维护：vacuum full执行慢怎么办？
华为云官方博客
12-14 3065
摘要：在数据库中用于维护数据库磁盘空间的工具是VACUUM，其重要的作用是删除那些已经标示为删除的数据并释放空间。 vacuum的功能 回收空间 数据库总是不断地在执行删除，更新等操作。良好的空间管理非常重要，能够对性能带来大幅提高。 执行delete操作后，表中的记录只是被标示为删除状态，并没有释放空间，在以后的update或insert操作中该部分的空间是不能够被重用的。 在数据库中用于维护数据库磁盘空间的工具是VACUUM，其重要的作用是删除那些已经标示为删除的数据并释放空间。经过vacuu
linux postgres占用过高
韶华易逝，容颜易老，珍惜当下...........
01-26 1146
查看命令： ps aux | grep postgres #启动，停止，重启服务 systemctl start postgresql-10.service systemctl stop postgresql-10.service systemctl restart postgresql-10.service #查看一个服务的状态 systemctl status postgresql-10.service #开机时启用一个服务 systemctl enable postgresql-10.service
postgresql清理磁盘空间
帅气凡的博客
08-08 836
清理pgsql磁盘空间
postgresql 清理磁盘空间
cuisidong1997的博客
08-12 2632
这种形式的命令可以和表的普通读写操作并行，因为它不会获得一个排他锁。但是，这种形式中额外的空间并没有被还给操作系统（在大多数情况下），它仅仅被保留在同一个表中以备重用。VACUUM FULL将表的整个内容重写到一个新的磁盘文件中，并且不包含额外的空间，这使得没有被使用的空间被还给操作系统。这种形式的命令更慢并且在其被处理时要求在每个表上保持一个排他锁。postgresql 长期使用后会造成删除的历史记录占用磁盘空间未被清理，使用下面的方法可以完成清理工作：VACUUM FULL。...
postgresql如何优雅地清理磁盘空间碎片VACUUM
热门推荐
qq_35789269的博客
02-21 1万+
第一步：查询哪些表占用空间太大： --数据库中单个表的大小（不包含索引） select pg_size_pretty(pg_relation_size('表名')); --查出所有表（包含索引）并排序 SELECT table_schema || '.' || table_name AS table_full_name, pg_size_pretty(pg_total_relation_size('"' || table_schema || '"."' || table_name || '"')) A
清理PostgreSQL磁盘空间 并重新生成空间
cheniqit1的专栏
11-17 3205
<br /><br />begin;<br />lock sysuserlog in access exclusive mode;<br />create table bar as select * from sysuserlog;<br />truncate sysuserlog;<br />insert into sysuserlog (select * from bar);<br />commit;
PostgreSQL归档日志清理实战：如何用pg_archivecleanup和自定义脚本释放磁盘空间
ik6789012的博客
03-03 216
本文深入探讨了PostgreSQL归档日志的自动化清理策略，重点解析了pg_archivecleanup工具的安全机制与高级用法，并结合pg_controldata等工具获取关键清理依据。文章提供了从手动操作到企业级智能运维的完整实践方案，包括一个可处理复制槽、保留策略和磁盘空间监控的健壮脚本，旨在帮助DBA构建安全、可观测的归档管理体系，有效释放磁盘空间并保障数据恢复能力。
Postgresql踩坑-磁盘空间不足
qq_31856061的博客
02-17 7305
引入 在工作项目的服务器中，用的是postgresql数据库，一直以来并没有报过磁盘空间不足，但是今天早上回来发现ovirt管理端登录不上，排查发现pgsql服务没有了，没有人动过服务器，于是重新开启了pgsql服务，一切正常。但是为啥pgsql会自己关掉？去查看了pgsql的日志文件，发现它报了一个磁盘空间不足的错误。 相关资料 百度以下发现这问题还是有记录的 背景： 加压测试过程中发现插入数据过程中报错：could not write to hash-join temporary file: 设备上没
PostgreSQL 清理过程
yunmu666的博客
01-31 2343
清理过程
查看PostgreSQL数据库进程占用内存的方法
荷塘月色
11-26 1950
使用top命令查看内存时，会发现有一些PostgreSQL进程占用了很大的内存，用ps aux常看各个进程的内存时，如果把各个进程的内存加起来时，发现超过了总内存，所以很困惑。
Postgresql 如何降低 wal 占用磁盘空间，降低磁盘存储成本
sql server的专栏
09-13 1194
POSTGRESQL WAL 的存储一直是一个值得讨论的问题，到底一个POSTGRESQL 在极端的情况下，可以用多少的空间来存储WAL 日志。这里不是要讨论逻辑复制槽，也不是讨论ARCHIVE ，这里要讨论是一种极端的方法，尝试将POSTGRESQL WAL占用的磁盘空间最小化。这里主要针对的对象是，单机的POSTGRESQL ，不想通过专业的人员来进行维护的场景，如果说目前的方案需要一个场景，...
pg数据库data文件夹达到32G
baitangran2976的博客
07-14 755
最近工作中遇到pg数据库data文件夹大小达到32G，大致的排查流程如下： 1.首先查看是哪个文件或者那些文件比较大； 2.根据文件的名称找到对应的数据表a； 3.确认数据表a中数据实际上只有3000条左右，数据量没有这么大； 4.经过对实际业务场景排查，这个表a是用来记录数据库表数据变化的表，其他的表中数据发生增删改，表中的触发器都会插入一条数据到表a中； 5.平台会轮询这个...
PostgreSQL性能优化：如何定期清理无用索引以释放磁盘空间（索引膨胀监控）
数据知道的博客
02-08 2040
PostgreSQL 无用索引清理与优化指南 随着业务迭代，PostgreSQL 数据库中会积累大量"僵尸索引"——包括历史遗留、查询模式变更失效或从未使用的索引。这些无用索引不仅浪费磁盘空间和内存资源，还会拖慢 DML 操作性能，并因 MVCC 机制导致索引膨胀问题。 本文系统介绍了索引治理方法：首先通过 pg_stat_user_indexes 识别零访问索引，排除约束类索引后评估删除；其次分析低效索引的使用效率；最后检测索引膨胀情况，提供 pgstattuple 扩展和轻量级估算两
pg_wal文件过多过大清理方式
m0_52426915的博客
08-07 3515
上面的SQL语句中先用函数“pg_current_wal_lsn”获得当前正在写的LSN号，然后用函数“pg_walfile_name”找出当前LSN号对应的WAL文件，发现是“000000010000000000000027”说明这时“000000010000000000000028”“000000010000000000000029”“00000001000000000000002A”“00000001000000000000002B”都是以前的WAL文件。是要保留的最新 WAL 文件的名称。
PostgreSQL目录结构之base目录
来啊 快活啊
10-28 2465
PostgreSQL目录结构之base目录
PG 数据库服务磁盘空间占满问题处理
泊涯
05-17 7485
PG 数据库服务磁盘空间占满问题处理 前段时间客户运维人员报生产环境批处理数据库环境出问题，没办法正常运行，于是登录他们服务器，查看了PG日志文件，发现原来是磁盘空间满的原因： 接下来直接df -Th ，看到是home空间满，而我是PG的data文件都存在在home目录下，那应该是PG的数据文件空间占满了，但是系统才运行2年，磁盘空间配置将近900G，一下子就占满了，肯定是摸个程序代码突发性引起的，不然这系统运行2年多，一...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值