Architecture ============ .. Hint:: より深く理解するには、 :ref:`Recommended Architectures for PostgreSQL in Kubernetes ` というタイトルのCNCFブログ投稿の記事を読むことをお勧めします。これは、KubernetesでのPostgreSQL展開のベストプラクティスとデザインの考慮事項に関する貴重な洞察を提供します。 このドキュメントページでは、KubernetesにPostgreSQLを展開する際に、堅牢なビジネス継続戦略を実装するための主要なアーキテクチャの考慮事項の概要を提供します。これらの考慮事項には次のものが含まれます。 - ** :ref:`マルチアベイラビリティーゾーン Kubernetesクラスター <マルチアベイラビリティーゾーン Kubernetesクラスター>` vs.  :ref:`単一のアベイラビリティーゾーン Kubernetesクラスター <単一のアベイラビリティーゾーン Kubernetesクラスター>` ** ストレッチクラスター3つ以上のアベイラビリティーゾーン全体での展開と非ストレッチクラスター単一のアベイラビリティーゾーン内での展開の違いを評価します。 - :ref:`PostgreSQLワークロードのノードの予約 ` 特定のワーカーノードを\ ``postgres`` タスク専用にすることによりPostgreSQLワークロードを分離し、最適なパフォーマンスを保証し、他のワークロードからの干渉を最小限に抑えます。 - :ref:`PostgreSQLアーキテクチャ ` 単一のKubernetesクラスター内での効果的なPostgreSQL展開を設計して、高可用性とパフォーマンス要件を満たす。 - :ref:`Kubernetesクラスター全体のデプロイメント ` 複数のKubernetesクラスターにまたがるPostgreSQLアーキテクチャを計画および実装して、包括的なディザスターリカバリー機能を提供します。 状態の同期 ---------- PostgreSQLはデータベース管理システムであるため、Kubernetesで **ステートフルワークロード** として扱う必要があります。ステートレスアプリケーションは、主にトラフィックリダイレクションを使用して高可用性HAとディザスターリカバリーDRを実現しますが、データベースの場合、次のいずれかを採用して、できれば連続的かつ瞬間的な方法で、状態を複数の場所にレプリケートする必要があります2つの戦略 - *ストレージレベルのレプリケーション*\ 、通常は永続ボリューム - *アプリケーションレベルのレプリケーション*\ 、この特定の場合PostgreSQL EDB Postgres for Kubernetesは、簡単な理由でアプリケーションレベルのレプリケーションに依存しています。PostgreSQLデータベース管理システムには、 **Write Ahead LogWAL配送** に基づいた堅牢で信頼性の高いビルトイン **物理レプリケーション** 機能が付属しています。これらは、10年以上、世界中の何百万ものユーザーが実稼働環境で使用してきました。 PostgreSQLは、ネットワークを介した非同期および同期ストリーミングレプリケーションの両方と、非同期ファイルベースのログ配布通常はフォールバックオプションとして使用される、オブジェクトストアにWALファイルを保存するなどをサポートしています。レプリカは通常_スタンバイサーバー_と呼ばれ、\_ホットスタンバイ_機能のおかげで、読み取り専用のワークロードに使用することもできます。 .. Important:: **PostgreSQLを使用したストレージレベルのレプリケーションはお勧めしません**が、KubernetesのEDB Postgresではその戦略を採用できます。詳細については、KubeCon NA 2022でのChris MilstedとGabriele Bartoliniによる `Data On Kubernetes, Deploying And Running PostgreSQL And Patterns For Databases In a Kubernetes Cluster `_ というタイトルの講演を参照してください。 このトピックが詳細にカバーされている場所。 Kubernetesアーキテクチャ ------------------------ Kubernetesは、冗長、低遅延、プライベートネットワーク接続を介して相互に接続されている別の物理的な場所データセンター、障害ゾーン、またはより頻繁に **アベイラビリティーゾーン** としても知られる場所にまたがる可能性をネイティブに提供します。 分散システムであるため、単一ゾーンの障害に対するコントロールプレーンの復元力を高めるために、Kubernetesクラスターの推奨最小アベイラビリティーゾーンの数は3です。詳細については、 `Running in multiple zones `_ を参照してください。これは、 **各データセンターが常にアクティブ** であり、ワークロードを同時に実行できることを意味します。 .. Note:: パブリッククラウドプロバイダーのマネージドKubernetesサービスのほとんどは、各リージョンに3つ以上のアベイラビリティーゾーンを既に提供しています。 マルチアベイラビリティーゾーン Kubernetesクラスター ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ 3つ以上のゾーンを備えたマルチアベイラビリティーゾーンのKubernetesアーキテクチャは、PostgreSQLの使用にお勧めします。このシナリオは、クラウドプロバイダーによって管理されるKubernetesサービスの一般的なシナリオです。 .. figure:: /images/k8s-architecture-3-az.png :width: 70% :alt: Kubernetes cluster spanning over 3 independent data centers Kubernetes cluster spanning over 3 independent data centers このようなアーキテクチャにより、KubernetesオペレータのEDB Postgresは、すべてのアベイラビリティーゾーンをアクティブとして扱うことにより、単一のKubernetesクラスター内のゾーンにわたって\ ``Cluster`` リソースの完全なライフサイクルを制御できます。これには、他の操作の中で、宣言内のワークロードが :ref:`Scheduling ` 含まれます方法アフィニティルール、許容値、ノードセレクターに基づいて、自動フェイルオーバー、自己修復、および更新。すべては、単一のKubernetesクラスター内のゾーンを超えてシームレスに動作します。 :ref:`PostgreSQLアーキテクチャ ` を参照してください。 ストレージ、ワーカーノード、およびアベイラビリティーゾーンレベルでのシェアードナッシング展開を介して、同じKubernetesクラスター内でPostgreSQLクラスターをデザインする方法の詳細については、以下のセクションを参照してください。 さらに、 :ref:`Kubernetesクラスター全体のデプロイメント ` を活用できます。 さまざまなリージョンで「パッシブ」 :ref:`PostgreSQL replica clusters ` をホスティングし、宣言的構成を介して管理する分散PostgreSQLトポロジ。このセットアップは、ディザスターリカバリーDR、読み取り専用操作、またはクロスリージョンの可用性に最適です。 .. Important:: 各オペレーター展開は、ローカルKubernetesクラスター内の操作のみを管理できます。制御されたスイッチオーバーや予期しないフェイルオーバーなどのKubernetesクラスターにわたる操作の場合、GitOpsなどを介して手動で、または高レベルのクラスター管理ツールを使用して、調整を処理する必要があります。 .. figure:: /images/k8s-architecture-multi.png :width: 70% :alt: Example of a multiple Kubernetes cluster architecture distributed over 3 regions each with 3 independent data centers Example of a multiple Kubernetes cluster architecture distributed over 3 regions each with 3 independent data centers 単一のアベイラビリティーゾーン Kubernetesクラスター ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ Kubernetesクラスターにアベイラビリティーゾーンが1つだけある場合でも、Kubernetes用EDB Postgresは、PostgreSQLデータベースのHAおよびDRの結果を向上させるための多くの機能を提供し、単一点障害SPoFをゾーンのレベルに押し上げます可能な限り-つまり、KubernetesクラスターのEDB Postgresに障害が発生する前に、ゾーンを停止する必要があります。 このシナリオは、1つのデータセンターのみが使用できる自己管理のオンプレミスのKubernetesクラスターの一般的なシナリオです。 単一のアベイラビリティーゾーン Kubernetesクラスターは、低遅延接続の範囲内で **2つのデータセンター** のみが使用可能な場合、通常は同じ大都市圏で、唯一の実行可能なオプションです。 2つのゾーンのみがあると、マルチアベイラビリティーゾーンのKubernetesクラスターを作成できません。これには、少なくとも3つのゾーンが必要です。その結果、ユーザーはアクティブ/パッシブ構成で2つの別個のKubernetesクラスターを作成し、2番目のクラスターは主にディザスターリカバリーに使用される :ref:`replica cluster feature ` を参照してください。 .. figure:: /images/k8s-architecture-2-az.png :width: 70% :alt: Example of a Kubernetes architecture with only 2 data centers Example of a Kubernetes architecture with only 2 data centers .. Hint:: Kubernetesの取り組みの初期段階にある場合は、このドキュメントをインフラストラクチャチームと共有してください。 2つのデータセンターのセットアップは、従来のベアメタルまたはVMベースのインフラストラクチャからKubernetesへの「リフトアンドシフト」移行の結果である可能性があり、3+ゾーンシナリオでKubernetesが提供するメリットは知られていない可能性があります、またはインフラストラクチャアーキテクチャの設計時に対処されました。最終的に、他の2つに接続された3番目の物理的な場所は、日常の複雑さをアプリケーションレベルから物理的インフラストラクチャレベルに移動することにより、インフラストラクチャの全体的なコストを削減するため、組織にとって検討すべき有効なオプションを表す可能性があります。 :ref:`PostgreSQLアーキテクチャ ` を参照してください。 ストレージおよびワーカーノードレベルのみでのシェアードナッシング展開を介して、単一のアベイラビリティーゾーンKubernetesクラスター内でPostgreSQLクラスターをデザインする方法の詳細については、以下のセクションを参照してください。 HAの場合、このようなシナリオでは、PostgreSQLインスタンスが別のワーカーノードに配置され、同じストレージを共有しないことがさらに重要になります。 DRの場合、追加の :ref:`Kubernetesクラスター全体のデプロイメント ` を使用して、 “passive” :ref:`PostgreSQL replica clusters ` をホスティングする分散トポロジを定義することにより、単一ゾーンより上にSPoFをプッシュできます。このシナリオの他のKubernetesワークロードと同様に、Kubernetesクラスターのプライマリとしての昇格を手動で行う必要があります。 :ref:`replica cluster feature ` を介して、最初にプライマリクラスターを降格し、次にレプリカクラスターを昇格させることにより、分散PostgreSQLトポロジを定義し、データセンター間の制御されたスイッチオーバーを調整できます。以前のプライマリを再クローンする必要はありません。フェールオーバーは完全に宣言型になりましたが、オペレーターは単一のKubernetesクラスター内でのみ機能できるため、Kubernetesクラスター間の自動フェイルオーバーはEDB Postgres for Kubernetesのスコープ内ではありません。 .. Important:: Kubernetes用EDB Postgresは、高レベルのオペレーターまたは管理ツールを介してさまざまなKubernetesクラスターにわたってPostgreSQLアクティブ/パッシブトポロジを調整するために必要なすべてのプリミティブとプローブを提供します。 PostgreSQLワークロードのノードの予約 ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ マルチアベイラビリティーゾーン環境で動作しているか、より重要には、単一のアベイラビリティーゾーン内で動作しているかにかかわらず、運用環境で特定のワーカーノードを\ ``postgres`` 専用にすることにより、PostgreSQLワークロードを分離することを強くお勧めします。 PostgreSQLワークロードの実行専用のKubernetesワーカーノードは、 **Postgresノード** または\ ``postgres`` ノードと呼ばれます。このアプローチにより、データベース操作の最適なパフォーマンスとリソース割り当てが保証されます。 .. Hint:: 一般的な経験則として、Postgresノードは3の倍数で展開します。理想的には、アベイラビリティーゾーンごとに1つのノードを使用します。 3つのノード1つのプライマリと2つのスタンバイレプリカを含むPostgreSQLクラスターが異なるノードに分散され、フォールトトレランスと可用性が向上するため、3つのノードが最適な数です。 Kubernetesでは、これは宣言的な方法でノードラベルとテイントを使用して、インフラストラクチャ・アズ・コードIaCの実践に合わせて実現できます。ラベルはノードが\ ``postgres`` ワークロードを実行できることを保証し、テイントは非\ ``postgres`` ワークロードが実行されないようにするのに役立ちます。そのノードでスケジュールされています。 .. Important:: この方法は、コンピューティングリソースと、ローカルに接続されたディスクを使用する場合はストレージの両方の点で、PostgreSQLワークロードを他のワークロードから分離する最も簡単な方法です。異なるPostgreSQLクラスターが同じノードを共有する場合がありますが、ラベルとテイントを使用して、ノードが特定の`Cluster` の単一のインスタンス専用になるようにすることにより、これをさらに進めることができます。 提案されたノードラベル ^^^^^^^^^^^^^^^^^^^^^^ KubernetesのEDB Postgresは、 ``node-role.kubernetes.io/postgres`` ラベルを使用することをお勧めします。これは予約ラベル\ ``*.kubernetes.io`` であるため、ワーカーノードが作成された後にのみ適用できます。 ``postgres`` ラベルをノードに割り当てるには、次のコマンドを使用します。 .. code:: sh kubectl label node node-role.kubernetes.io/postgres= ``Cluster`` リソースが\ ``postgres`` ノードでスケジュールされるようにするには、マニフェストで\ ``.spec.affinity.nodeSelector`` スタンザを正しく構成する必要があります。次に例を示します。 .. code:: yaml spec: # affinity: # nodeSelector: node-role.kubernetes.io/postgres: "" 提案されたノードテイント ^^^^^^^^^^^^^^^^^^^^^^^^ KubernetesのEDB Postgresは、 ``node-role.kubernetes.io/postgres`` テイントを使用することをお勧めします。 ``postgres`` テイントをノードに割り当てるには、次のコマンドを使用します。 .. code:: sh kubectl taint node node-role.kubernetes.io/postgres=:NoSchedule ``postgres`` テイントを持つノードで\ ``Cluster`` リソースがスケジュールされるように保証には、マニフェストで\ ``.spec.affinity.tolerations`` スタンザを正しく構成する必要があります。次に例を示します。 .. code:: yaml spec: # affinity: # tolerations: - key: node-role.kubernetes.io/postgres operator: Exists effect: NoSchedule PostgreSQLアーキテクチャ ------------------------ KubernetesのEDB Postgresは、非同期および同期ストリーミングレプリケーションに基づいてクラスターをサポートし、次の仕様で同じKubernetesクラスター内の複数のホットスタンバイレプリカを管理します。 - 1つのプライマリ、HA用のオプションの複数のホットスタンバイレプリカ - アプリケーションで使用可能なサービス - ``-rw`` アプリケーションはクラスターのプライマリインスタンスにのみ接続しますb_tran_6 ``-ro`` アプリケーションは読み取り専用ワークロードオプショナルのホットスタンバイレプリカにのみ接続します - ``-r`` アプリケーションは読み取り専用のインスタンスに接続しますワークロードのみオプショナル - PostgreSQLクラスターの復元力を向上させるために推奨されるシェアードナッシングアーキテクチャ - PostgreSQLインスタンスは別のKubernetesワーカーノードに存在し、ネットワークのみを共有する必要があります。その結果、インスタンスはストレージを共有せず、できれば自分が作成したノードに接続されたローカルボリュームを使用する必要があります。 run on - PostgreSQLインスタンスは、同じKubernetesクラスター/リージョン内の異なるアベイラビリティーゾーンに存在する必要があります .. Important:: `Cluster` 構成の`managed.services` セクションを介して上記のサービスを構成できます。これは、サービスの数を減らし、タイプを選択することにより実行できますデフォルトは`ClusterIP` です。詳細については、 :ref:`Service Management ` を参照してください。 以下。 次の図は、3つの異なるアベイラビリティーゾーンにまたがるPostgreSQLクラスターに推奨されるシェアードナッシングアーキテクチャの単純化したビューを提供し、それぞれがPostgreSQLデータ専用のローカルストレージを備えた別のノードで実行されます。 .. figure:: /images/k8s-pg-architecture.png :width: 70% :alt: Bird-eye view of the recommended shared nothing architecture for PostgreSQL in Kubernetes Bird-eye view of the recommended shared nothing architecture for PostgreSQL in Kubernetes KubernetesのEDB Postgresは、クラスターのトポロジが変更された場合に、上記のサービスの更新を自動的に処理します。たとえば、フェールオーバーが発生した場合、\ ``-rw`` サービスを自動的に更新して昇格したプライマリをポイントし、アプリケーションからのトラフィックがシームレスにリダイレクトされるようにします。 .. Seealso:: KubernetesのEDB Postgresが同期設定を含むPostgreSQLレプリケーションに依存する方法の詳細については、 :ref:`Logical Replication ` を参照してください。 .. Seealso:: 同じKubernetesクラスター内のステートレスアプリケーションからEDB Postgres for Kubernetesに接続する方法については、 :ref:`Connecting from an application ` を参照してください。 .. Seealso:: 接続プーラーとしてPgBouncerを利用し、アプリケーションとPostgreSQLクラスターの間にアクセスレイヤーを作成する方法については、 :ref:`PgBouncerを使用した接続プーリング ` を参照してください。 読み取り/書き込みワークロード ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^ アプリケーションは、次の図に示すように、Kubernetesオペレーターによって_currentprimary_として選択されたPostgreSQLインスタンスに接続することを決定できます。 .. figure:: /images/architecture-rw.png :width: 70% :alt: Applications writing to the single primary Applications writing to the single primary アプリケーションは、 ``-rw`` サフィックスサービスを使用できます。 プライマリが一時的または永続的に使用不可になった場合、高可用性の目的で、Kubernetes用EDB Postgresはフェイルオーバーをトリガーし、 ``-rw`` サービスをクラスターの別のインスタンスをポイントします。 読み取り専用ワークロード ^^^^^^^^^^^^^^^^^^^^^^^^ .. Important:: アプリケーションは制限に注意する必要があります `Hot Standby `_ は、これらのワークロードを処理するときにPostgreSQLが動作する方法を示し、精通しています。 アプリケーションは、オペレーターが利用できる\ ``-ro`` サービスを介してホットスタンバイレプリカにアクセスできます。このサービスにより、アプリケーションはプライマリノードから読み取り専用クエリをオフロードできます。 次の図は、アーキテクチャを示しています。 .. figure:: /images/architecture-read-only.png :width: 70% :alt: Applications reading from hot standby replicas in round robin Applications reading from hot standby replicas in round robin アプリケーションは、 ``-r`` サービスを介してPostgreSQLインスタンスにアクセスすることもできます。 Kubernetesクラスター全体のデプロイメント ---------------------------------------- .. Note:: EDB Postgres for Kubernetesは、このセクションで説明するように、レプリカクラスターを使用して分散PostgreSQLトポロジを定義できる機能を介して、複数のKubernetesクラスターにわたるPostgreSQLの展開をサポートしています。 分散PostgreSQLクラスターでは、常にプライマリとして機能する1つのPostgreSQLインスタンスのみが存在できます。これは、アプリケーションが常に単一のKubernetesクラスター内にのみ書き込むことができることを意味します。 ただし、ビジネス継続性の目標に関しては、次のことが基本です。 - PostgreSQLバックアップデータを複数の場所、リージョンに保存し、場合によっては異なるプロバイダーを使用することにより、グローバル **リカバリポイント目標** :ref:`リリース候補の目的 <リリース候補の目的>` を削減します ディザスターリカバリー - プライマリKubernetesクラスター高可用性を超えたPostgreSQLレプリケーションを利用することにより、グローバル **リカバリ時間目標** :ref:`RTOとRPOのインパクト ` を削減します。 上記の懸念事項に対処するために、KubernetesのEDB Postgresは、さまざまなKubernetesクラスターに分散され、プライマリPostgreSQLクラスターと1つ以上のPostgreSQLレプリカクラスターで構成されるPostgreSQLトポロジの概念を導入します。この機能は、 **レプリカクラスターを使用した分散PostgreSQLトポロジ** と呼ばれ、プライベート、パブリック、ハイブリッド、およびマルチクラウドのコンテキストでのマルチクラスター展開が有効になります。 レプリカクラスターは、継続的リカバリーにある別個の\ ``Cluster`` リソースであり、WALアーカイブからのWALシッピングを介して、またはプライマリまたはスタンバイカスケードからのストリーミングレプリケーションを介して、別のソースからレプリケートされます。 次の図は、2つの異なるKubernetesクラスターにまたがるPostgreSQLクラスターを示しています。プライマリクラスターは最初のKubernetesクラスターにあり、レプリカクラスターは2番目にあります。 2番目のKubernetesクラスターは、会社のディザスターリカバリークラスターとして機能し、災害が発生して最初のクラスターが使用不可になった場合にアクティブ化される準備が整います。 .. figure:: /images/multi-cluster.png :width: 70% :alt: An example of multi-cluster deployment with a primary and a replica cluster An example of multi-cluster deployment with a primary and a replica cluster レプリカクラスターは、プライマリクラスターと同じアーキテクチャを持つことができます。プライマリインスタンスの代わりに、レプリカクラスターには **指定されたプライマリ** インスタンスがあります。これは、ストリーミングレプリケーション対称アーキテクチャで任意の数のカスケードスタンバイサーバーを持つスタンバイサーバーです。 指定されたプライマリは、いつでも昇格でき、レプリカクラスターを、書き込み接続を受け入れることができるプライマリクラスターに変換できます。これは通常、次のことによりトリガーされます。 - **人間の決定** 他のPostgreSQLクラスターまたはKubernetesクラスター全体をプライマリにすることを選択します。データの損失を回避し、元のプライマリが再クローンを作成せずに続くことができるように保証には、最初に現在のプライマリを降格し、次にKubernetes用EDB Postgresが提供するAPIを使用して、指定されたプライマリを昇格させます。 - **予期しない障害** Kubernetesクラスター全体に障害が発生すると、データ損失が発生する可能性がありますが、 PostgreSQLレプリカクラスターを昇格させることにより、他のKubernetesクラスターにフェールオーバーする必要があります。 .. Warning:: KubernetesのEDB Postgresは、単一のKubernetesクラスターを超える権限がないため、クラスター間の自動フェイルオーバーを実行できません。このような操作は手動で実行するか、マルチクラスター/フェデレーションクラスター対応機関に委任する必要があります。 .. Important:: Kubernetes用EDB Postgres、宣言的構成を介して分散トポロジを制御でき、GitOpsを含むインフラストラクチャ・アズ・コードIaCプロセスの一部としてこれらの手順を自動化できます。 上記の例で指定されたプライマリは、WALストリーミング\ ``primary_conninfo`` を介してフィードされ、\ ``restore_command`` および\ ``barman-cloud-wal-restore`` を介したファイルベースのWAL配送のフォールバックオプションを使用します。 KubernetesのEDB Postgresを使用すると、マルチプルのレプリカクラスターを使用したトポロジを定義できます。より少ない数のレプリカクラスターを定義し、クラスターがプライマリに昇格したときにこの数を増やすこともできます。 .. Seealso:: 物理レプリカクラスターがどのように動作するか、およびさまざまなKubernetesクラスターにわたって読み取り専用クラスターを使用した分散トポロジを定義する方法の詳細については、 :ref:`レプリカクラスター <レプリカクラスター>` を参照してください。このアプローチは、グローバルディザスターリカバリーと高可用性HA戦略を大幅に強化できます。