I. 教程
II. SQL 语言
III. 服务器管理
- 章14. 安装指导
- 章15. 在 Windows 上安装客户端
- 章16. 操作系统环境
- 章17. 服务器配置
- 章18. 数据库角色和权限
- 章19. 管理数据库
- 章21. 区域
- 章20. 用户认证
- 章22. 日常数据库维护工作
- 章23. 备份与恢复
- 章24. 高可用性与负载均衡
- 章25. 监控数据库的活动
- 章26. 监控磁盘使用情况
- 章27. 可靠性和预写式日志
- 章28. 回归测试
IV. 客户端接口
- Chapter 28. libpq - C 库
- 章29.
- Chapter 30. ecpg - 在 C 里嵌入 SQL
- Chapter 31. 信息模式
- 31.2. 数据类型
- 31.3. informationschemacatalog_name
- 31.4. applicable_roles
- 31.5. check_constraints
- 31.6. columndomainusage
- 31.7. column_privileges
- 31.8. columnudtusage
- 31.9. columns
- 31.10. constraintcolumnusage
- 31.11. constrainttableusage
- 31.12. datatypeprivileges
- 31.13. domain_constraints
- 31.14. domainudtusage
- 31.15. domains
- 31.16. element_types
- 31.17. enabled_roles
- 31.18. keycolumnusage
- 31.20. referential_constraints
- 31.21. rolecolumngrants
- 31.22. roleroutinegrants
- 31.23. roletablegrants
- 31.24. roleusagegrants
- 31.25. routine_privileges
- 31.26. routines
- 31.27. schemata
- 31.28. sql_features
- 31.29. sqlimplementationinfo
- 31.30. sql_languages
- 31.31. sql_packages
- 31.32. sql_sizing
- 31.33. sqlsizingprofiles
- 31.34. table_constraints
- 31.35. table_privileges
- 31.36. tables
- 31.37. triggers
- 31.38. usage_privileges
- 31.39. viewcolumnusage
- 31.40. viewtableusage
- 31.41. views
V. 服务器端编程
- 章33. 扩展 SQL
- 章34. 触发器
- 章35. 规则系统
- 章36. 过程语言
- 章37. PL/pgSQL - SQL 过程语言
- 章38. PL/Tcl - Tcl 过程语言
- 章39. PL/Perl - Perl 过程语言
- 章40. PL/Python - Python 过程语言
- 章41. 服务器编程接口
VI. 参考手册
- I. SQL 命令
- ABORT
- ALTER AGGREGATE
- ALTER CONVERSION
- ALTER DATABASE
- ALTER DOMAIN
- ALTER FUNCTION
- ALTER GROUP
- ALTER INDEX
- ALTER LANGUAGE
- ALTER OPERATOR
- ALTER OPERATOR CLASS
- ALTER ROLE
- ALTER SCHEMA
- ALTER SEQUENCE
- ALTER TABLE
- ALTER TABLESPACE
- ALTER TRIGGER
- ALTER TYPE
- ALTER USER
- ANALYZE
- BEGIN
- CHECKPOINT
- CLOSE
- CLUSTER
- COMMENT
- COMMIT PREPARED
- COMMIT
- COPY
- CREATE AGGREGATE
- CREATE CAST
- CREATE CONSTRAINT TRIGGER
- CREATE CONVERSION
- CREATE DATABASE
- CREATE DOMAIN
- CREATE FUNCTION
- CREATE GROUP
- CREATE INDEX
- CREATE LANGUAGE
- CREATE OPERATOR CLASS
- CREATE OPERATOR
- CREATE ROLE
- CREATE RULE
- CREATE SCHEMA
- CREATE SEQUENCE
- CREATE TABLE
- CREATE TABLE AS
- CREATE TABLESPACE
- CREATE TRIGGER
- CREATE TYPE
- CREATE USER
- CREATE VIEW
- DEALLOCATE
- DECLARE
- DELETE
- DROP OWNED
- DROP AGGREGATE
- DROP CAST
- DROP CONVERSION
- DROP DATABASE
- DROP DOMAIN
- DROP FUNCTION
- DROP GROUP
- DROP INDEX
- DROP LANGUAGE
- DROP OPERATOR CLASS
- DROP OPERATOR
- DROP ROLE
- DROP RULE
- DROP SCHEMA
- DROP SEQUENCE
- DROP TABLE
- DROP TABLESPACE
- DROP TRIGGER
- DROP TYPE
- DROP USER
- DROP VIEW
- END
- EXECUTE
- EXPLAIN
- FETCH
- GRANT
- INSERT
- LISTEN
- LOAD
- LOCK
- MOVE
- NOTIFY
- PREPARE TRANSACTION
- PREPARE
- REASSIGN OWNED
- REINDEX
- RELEASE SAVEPOINT
- RESET
- REVOKE
- ROLLBACK PREPARED
- ROLLBACK TO SAVEPOINT
- ROLLBACK
- SAVEPOINT
- SELECT
- SELECT INTO
- SET
- SET CONSTRAINTS
- SET ROLE
- SET SESSION AUTHORIZATION
- SET TRANSACTION
- SHOW
- START TRANSACTION
- TRUNCATE
- UNLISTEN
- UPDATE
- VACUUM
- II. PostgreSQL 客户端应用程序
- III. PostgreSQL 服务器应用程序
VII. 内部
- 章42. PostgreSQL 内部概貌
- 章43. 系统表
- 43.1. 概述
- 43.2. pg_aggregate
- 43.3. pg_am
- 43.4. pg_amop
- 43.5. pg_amproc
- 43.6. pg_attrdef
- 43.7. pg_attribute
- 43.8. pg_authid
- 43.9. pgauthmembers
- 43.10. pg_autovacuum
- 43.11. pg_cast
- 43.12. pg_class
- 43.13. pg_constraint
- 43.14. pg_conversion
- 43.15. pg_database
- 43.16. pg_depend
- 43.17. pg_description
- 43.18. pg_index
- 43.19. pg_inherits
- 43.20. pg_language
- 43.21. pg_largeobject
- 43.22. pg_listener
- 43.23. pg_namespace
- 43.24. pg_opclass
- 43.25. pg_operator
- 43.26. pg_pltemplate
- 43.27. pg_proc
- 43.28. pg_rewrite
- 43.29. pg_shdepend
- 43.30. pg_shdescription
- 43.31. pg_statistic
- 43.32. pg_tablespace
- 43.33. pg_trigger
- 43.34. pg_type
- 43.35. 系统视图
- 43.36. pg_cursors
- 43.37. pg_group
- 43.38. pg_indexes
- 43.39. pg_locks
- 43.40. pgpreparedstatements
- 43.41. pgpreparedxacts
- 43.42. pg_roles
- 43.43. pg_rules
- 43.44. pg_settings
- 43.45. pg_shadow
- 43.46. pg_stats
- 43.47. pg_tables
- 43.48. pgtimezoneabbrevs
- 43.49. pgtimezonenames
- 43.50. pg_user
- 43.51. pg_views
- 章44. 前/后端协议
- 章45. PostgreSQL 编码约定
- 章46. 本地语言支持
- 章47. 书写一个过程语言处理器
- 章48. 基因查询优化器
- 章49. 索引访问方法接口定义
- 章50. GiST 索引
- 章51. GIN 索引
- 章52. 数据库物理存储
- 章53. BKI 后端接口
- 章54. 规划器如何使用统计信息
VIII. 附录
23.4. 高可用性热备份服务器
连续归档可以配合随时准备取代失效主服务器的一个或多个备份服务器,用于创建一个高可用性(HA)集群。这个能力通常被称为热备份或日志传送(Log Shipping)。
虽然主服务器和备份服务器只是松散的耦合在一起,但它们必须同时运行。主服务器以连续归档模式运行,备份服务器以连续恢复模式运行并从主服务器不停的读取 WAL 文件。因为数据库的表无需为此进行任何改变,所以与其它复制方法相比,额外的管理开销很小。并且这种方法对主服务器的性能影响也很小。
直接移动 WAL 或在数据库服务器之间"传送"日志记录通常被称为日志传送(Log Shipping)。PostgreSQL 实现了基于文件的日志传送,意思是 WAL 记录每次移动一个完整的文件(WAL 段)。WAL 文件可以被轻易的在任意两个地点之间传送,不管是与邻近的系统还是地球另一面的系统。所需带宽取决于主服务器的事务发生速度。基于记录的日志传送也可以通过节23.4.4中讨论的自定义过程实现。
日志传送是异步的,也就是 WAL 记录在事务提交之后才被传送。也就是说主服务器遭遇致命故障后尚未传送的事务数据将会丢失。数据丢失的长度可以使用 archive_timeout
加以限制,比如限制为几秒钟。当然这么小的设置也导致了传送带宽的大幅增长。如果你期望将丢失的数据限制在一分钟之内,可能更好的办法是使用基于记录的日志传送。
因为不停的执行恢复过程,备份服务器在通常情况下是不能被访问的。由于恢复速度非常快,备份服务器通常在启用后只有很短的时间不能使用。因此,我们认为这个方案可以作为热备份来提供高可用性。将服务器从一个已归档的基础备份中恢复将可能耗费大量时间,所以这个方案只能用于灾难恢复而不能用于提供高可用性。
23.4.1. 规划
至少从数据库服务器的角度看,创建主服务器和备份服务器并令两者尽可能完全相同是非常明智的。特别是表空间的路径名必须保持完全一致,这样主服务器和备份服务器就必须拥有同样的表空间挂载路径(如果使用了表空间的话)。需要记住的是如果在主服务器上执行了 CREATE TABLESPACE 命令,那么该命令需要的任何新挂载点必须在执行该命令之前同时在主服务器和备份服务器上创建。硬件不必完全相同,但是经验显示维护两个完全相同的系统比维护两个不同的系统要少许多麻烦。无论如何,应尽量保持体系结构相同,比如一个是 32-bit 系统另一个是 64-bit 系统将不能正常工作。
通常,在主版本不同的服务器之间传送日志是不可能的,但是次版本不同是可以的,因为它们的磁盘格式相同,不过我们鼓励你尽可能使用完全相同的版本。在进行版本升级的时候,正确的做法是首先升级备份服务器,因为新版本的服务器通常可以读取老版本的 WAL 文件,但反之则不然。
启用一个备份服务器并不需要特殊的模式。在主服务器和备份服务器上发生的操作完全是普通的连续归档和连续恢复工作。这两个服务器之间唯一的联系仅仅是共享 WAL 归档文件:主服务器写归档、备份服务器读归档。必须注意确保不同主服务器的 WAL 归档之间不要发生混淆。
使得两个松散耦合的服务器协同工作的诀窍只是一个用于备份服务器的简单 restore_command
而已,它只是等候主服务器的下一个可用 WAL 文件罢了。restore_command
在备份服务器的 recovery.conf
文件中指定。普通的恢复过程需要来自 WAL 归档的文件,如果无法获取则报告错误。对于备份过程来说,下一个可用 WAL 文件通常不能马上获取,所以必须耐心等待直到它出现。能够等待的 restore_command
可以写成一个轮询下一个 WAL 文件是否可用的脚本。同时必须有触发失效切换的机制,它应当中断 restore_command
,跳出循环并向备份服务器返回一个"文件未找到"的错误。这将导致备份服务器结束恢复过程并取代已失效的主服务器。
一个伪代码示范的 restore_command
如下:
triggered = false; while (!NextWALFileReady() && !triggered) { sleep(100000L); /* 等候 0.1 秒 */ if (CheckForExternalTrigger()) triggered = true; } if (!triggered) CopyWALFileForRecovery();
PostgreSQL 并不提供检测主服务器失效以及通知备份服务器的系统软件。有许多这样的工具可用,它们为成功的实现失效切换做了非常好的整合,比如 IP 地址切换。
触发失效切换的方法是规划和设计的一个重要部分。restore_command
将在每个 WAL 文件上进行一次完整的执行,即运行 restore_command
的进程将在每个 WAL 文件上生成和结束(也就是不存在守护进程或服务器进程),因此不能使用信号和信号处理器,必须使用更加固定的通知机制来触发失效切换。可以使用简单的超时机制,特别是已知主服务器的 archive_timeout
设置的情况下。这个方法容易在网络繁忙或者主服务器负载较大的时候出现误判而触发失效切换。如果可行,也可以用明确创建主服务器失效指示文件的方法作为通知机制,这个方法不容易产生误判。
23.4.2. 实现
下面是配置一个备份服务器的简短过程。对于每一步的细节请参考所指示的前面的章节。
安装主服务器和备份服务器并尽可能保持完全相同,包括完全相同的数据库副本和 PostgreSQL 版本。
设置从主服务器连续归档 WAL 到备份服务器上的某个目录。确保主服务器上的 archive_command 和 archive_timeout 设置恰当(参见节23.3.1)。
为主服务器做一个基础备份(参见节23.3.2),然后在备份服务器上还原这个备份。
在备份服务器上依照 WAL 归档启动恢复过程,注意在
recovery.conf
中使用正确的restore_command
设置(参见节23.3.3)。
恢复过程将按只读方式处理 WAL 归档,因此,一旦 WAL 文件被复制到备份服务器之后它就可以在被备份数据库读取的同时复制到磁带上。这样,运行中的备份服务器可以同时作为长远考虑的、用于灾难恢复的文件存储。
为了测试,也可以在同一个系统上运行主服务器和备份服务器。不过这对于增强服务器的健壮性没有任何帮助,因此不能被称为高可用性(HA)。
23.4.3. 失效切换
主服务器失效时备份服务器必须立即进入失效切换过程。
备份服务器失效时并不需要进行失效切换。如果备份服务器可以被重启,那么即使过了一段时间之后,恢复过程仍然可以重新继续。如果备份服务器不能被重启,那么必须创建一个全新的备份服务器。
如果主服务器失效后重启了,必须有一个机制通知它:你现在已经不是主服务器了。这个常常被称为 STONITH(Shoot the Other Node In The Head),它对于保证不会出现两台机器都认为自己是主服务器来说是必须的,否则一旦出现这种情况将会导致混乱和数据丢失。
许多失效切换系统只由主服务器和备份服务器两个系统组成,之间用某种"心跳"机制连接,不停地检查两者之间的连通性以及主服务器是否依然有效。此外,还可以使用第三方系统(见证服务器)来避免不恰当的失效切换,但由此带来的额外复杂性可能是不值的的,除非经过了充分和严格的测试。
一旦失效切换到备份服务器,那么将只有一台单独的服务器在运行,也就是进入"简并态"(degenerate state)。先前的备份服务器将变为主服务器,先前的主服务器停机并可能仍然保持停机状态。为了回到正常状态,我们必须重建一个完整的备份服务器,比如就在原来已经停机的主服务器上。然后可以认为原来的主服务器与备份服务器现在调换了一下位置。有些人选择使用第三个服务器为新的主服务器提供备份,直到创建新的备份服务器,但是这样的方法明显更加复杂。
因此,从主服务器切换到备份服务器可以非常快速,但是需要花费一些时间来重新准备失效切换。我们鼓励有规律的在主服务器与备份服务器之间进行切换,这样就可以有规律的对服务器进行停机维护。并且这也提供了失效切换的实战演习,从而确保在真正需要的时候不出意外。我们建议你写一份完善的管理计划。
23.4.4. 基于记录的日志传送
PostgreSQL 直接支持前面所讲的基于文件的日志传送。它还能实现基于记录的日志传送,不过这需要你自己进行一些开发。
外部程序可以调用 pg_xlogfile_name_offset()
函数(参见节9.20)获取当前结尾 WAL 的文件名和精确的字节偏移量。然后就可以直接访问 WAL 文件并从备份服务器的最后一个已知 WAL 结尾开始复制数据。这样丢失的数据就位于该复制程序的轮询时间间隔中,因此丢失的数据可以非常少,但是这样一来就不会在强制归档不完整的段文件上浪费带宽。需要注意的是,备份服务器的 restore_command
脚本仍然处理完整的 WAL 文件,因此额外复制的数据对于备份服务器并不可用。仅在主服务器失效,也就是最后一部分 WAL 文件喂给备份服务器之后才可用。因此,正确实现这个过程需要该数据复制程序配合 restore_command
脚本才能完成。
23.4.5. 增量更新备份
对于一个热备份配置,有可能将主服务器上周期性基础备份的开销转移到备份服务器上。这就是通常所说的增量更新备份或日志更改积累(简称:更改积累)。
如果在备份服务器上备份的时候它正在处理主服务器传送过来的日志,那么可以重新加载那些数据并从最后一次重启的点开始重新启动备份服务器的恢复过程。我们不需要保留重启点之前的 WAL 文件。从增量备份中恢复要比从基础备份中恢复快得多。
因为备份服务器并不处于"活着"的状态,因此不能使用 pg_start_backup()
和 pg_stop_backup()
管理备份,因此保留多长时间的 WAL 用于备份恢复完全取决于你的意愿。你可以通过在备份服务器上运行 pg_controldata 来检查控制文件并确定当前检查点的 WAL 位置。
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论