Analytics in Hybrid Manager

Analytics in Hybrid Manager#

EDB Hybrid ManagerHMに埋め込まれている分析機能を理解して活用するための中心的なリソースへようこそ。

ハブクイックリンク Analytics Hub — コアコンセプト — 関連するハウツー

ハイブリッドマネージャーは、次の統合サポートを提供します。

  • Apache Icebergとカタログサービス

  • デルタレイクのクエリー

  • EDB Postgres分散PGDを使用した階層テーブル

  • オブジェクトストレージの高速分析のためのレイクハウスクラスター

  • 分析スタックの統合管理と可観測性

これらの機能を使用することにより、運用オーバーヘッドを削減して、Postgresで最新の費用対効果の高い分析アーキテクチャを構築できます。ハイブリッドマネージャーで完全に管理できます。

ハイブリッドマネージャーでアナリティクスを使用する理由#

EDB Hybrid Managerは、分析を統合して次のことを支援します。

  • 統合された可視性の獲得 HMが管理するEDB Postgresフリート全体の主要なメトリックと運用傾向を表示します。

  • パフォーマンスの最適化 パフォーマンスのボトルネックを特定し、HM管理データベースとレイクハウスクラスター内のクエリ動作を理解します。

  • リソースを効率的に管理する 分析ワークロードを含む、HM管理インスタンスのリソース消費を監視および調整します。

  • オペレーションの状態の強化 分析コンポーネントと基になるデータベースインフラストラクチャの可用性とステータスを追跡します。

  • データアーキテクチャの簡素化 EDB Postgres Lakehouseクラスターのプロビジョニングと管理、PGDでの階層テーブルの実装、およびオブジェクトストレージとの統合。すべてHMからです。

コアコンセプトと機能#

Apache Iceberg#

ハイブリッドマネージャーでは、Icebergは次の目的で使用されます。

  • Lakehouseクラスターによって照会される、Iceberg形式で大規模な分析テーブルを管理します。

  • Iceberg形式のオブジェクトストレージへのコールドパーティションのPGDオフロードをサポートします。

  • カタログ管理テーブルを介して外部ツールSpark、Trinoなどとの相互運用性を有効にします。

  • HM管理サービスLakekeeperまたは外部カタログを介したカタログ管理を促進します。

Apache Iceberg in Hybrid Manager

次のステップ Configure an Iceberg catalog connection

デルタレイク#

ハイブリッドマネージャーは、Delta Lakeテーブルの照会をサポートしています。

  • Lakehouseクラスターは、オブジェクトストレージに保存されている既存のDelta Lakeテーブルを照会できます。

  • HM管理のレイクハウスをデルタベースのパイプラインSpark、Databricksなどと統合します。

  • レイクハウスクラスターを介して既存のデルタデータレイクの高速分析を有効にします。

Delta Lake in Hybrid Manager

次のステップ Read Iceberg/Delta with or without a catalog

PGDを使用した階層テーブル#

階層テーブルにより、大規模な時系列データセットの効率的な管理が可能になります。

  • PGDのAutoPartitionは、時間ベースのパーティショニングを自動化します。

  • コールドパーティションは、オブジェクトストレージでIceberg形式にオフロードされます。

  • Lakehouseクラスターは、ホットデータとコールドデータにわたるクエリアクセスを提供します。

  • ハイブリッドマネージャーは、階層化テーブルをエンドツーエンドで構成および監視するのに役立ちます。

ハイブリッドマネージャーの階層化テーブル

次のステップ ハイブリッドマネージャーの階層化テーブル

レイクハウスクラスター#

Lakehouseクラスターは、HMの管理対象コンピューティングノードです。

  • オブジェクトストレージでのスケーラブルなベクトル化されたクエリ実行を提供します。

  • IcebergとDelta Lakeの両方のフォーマットをサポートします。

  • カタログHM管理または外部との統合。

  • より広範なHMエコシステムPGDオフロード、階層テーブル、BI統合との統合。

EDB Postgres Lakehouse Clusters on Hybrid Manager

次のステップ Create a Lakehouse cluster

これらの機能がどのように連携するか#

  • データのオフロード PGDクラスターは、コールドデータをIceberg形式のオブジェクトストレージにオフロードします。

  • カタログサービス HMはカタログと統合して、テーブルのメタデータを管理します。 LakehouseとPGDは、これらのカタログを介して照会します。

  • レイクハウスクラスター 管理対象コンピューティングノードは、オフロードされたデータでスケーラブルな分析クエリを実行します。

  • Delta Lake統合 Lakehouseクラスターは、インプレースにある既存のDelta Lakeテーブルも照会します。

  • 統合管理 Hybrid Managerは、分析アーキテクチャをプロビジョニング、構成、監視、および最適化するための単一のコントロールプレーンを提供します。

はじめに:クイックスタートチェックリスト#

このチェックリストに従って、ハイブリッドマネージャー分析機能の適用を開始します。

さらに探索する#

これらの機能を活用することにより、ハイブリッドマネージャーは、 EDB Postgres展開全体で最新の柔軟でパフォーマンスの高い分析アーキテクチャを構築できます。すべてが統合された運用効率の高いエクスペリエンスを通じて。

目次