ヘルプ Google Cloud Cloud DataFlow監視

Cloud DataFlow監視連携

Google Cloud SQLにホストされているデータベースのメモリ使用率やクエリパフォーマンスを監視し、可用性とパフォーマンスを維持します。
この監視を使用して、問題の特定、ダウン時間の短縮、データベースパフォーマンスの最適化を行えます。これにより、データベースインフラの信頼性、パフォーマンス、スケーラビリティ、セキュリティを強化します。

目次

設定

  • GCP監視新規追加時のリソース追加方法

    GCP監視を追加していない場合、次の手順を行ってください。

    1. Site24x7にログインします。
    2. ［Cloud］→［GCP］→［GCP監視の追加］に移動します。
    3. 表示名に監視名を入力します。
    4. プロジェクトIDを指定します。
    5. ［サービスアカウント］タブの［検索ボタン］から、サービスアカウントのJSONファイルをアップロードし、Site24x7の認証を行います。
    6. サービス・リソースタイプドロップダウンから［Cloud DataFlow］を選択します。
    7. 通知プロファイル、ユーザーアラートグループ、タグ、IT自動化テンプレート等の設定を行います。
    8. ［GCP監視を起動］をクリックします。
  • 既存GCP監視へのリソース追加方法

    GCP監視がすでに追加されている場合、次の手順でリソース監視を追加してください。

    1. Site24x7にログインします。
    2. ［Cloud］→［GCP］→［GCP監視名］に移動します。
    3. サービスビュー横の［Hamburger icon］アイコンより［編集］を選択します。
    4. サービス・リソースタイプドロップダウンから［Cloud SQL］を選択し、［保存］をクリックします。
    5. Cloud Storageがディスカバリーされると、［Cloud］→［GCP］→［GCP監視名］→［Cloud DataFlow］にリソース監視が表示されます。
リソースのディスカバリー完了まで5分ほどかかります。

チェック間隔

メトリックデータを1分ごとに収集し、ステータス情報を5分ごとに取得します。

サポートしているメトリック

メトリック名説明統計単位
アクティブサイズ ジョブ内の平均アクティブデータサイズです。 平均 バイト
スループット ジョブで消費された平均データサイズです。 平均 バイト
現在処理中のキー範囲の可用性 ワークに割り当てられ、ワーク操作可能な共有ストリーミング処理キーです。 合計 パーセンテージ
目的ワーカーインスタンス ワーカーインスタンスの希望数の合計です。 合計 数
支払い請求可能なシャッフルデータ処理 請求対象のデータフローのシャッフルデータの合計です。 合計 バイト
現在使用中のVCPU数 データフローで使用されているvCPU数の合計です。 合計 数
現在使用中のシャッフルスロット データフローで使用されているシャッフルスロット数の合計です。 合計 数
データウォーターマークラグ データフローで初回データが処理された時間です。 平均 秒
経過時間 アクティブパイプラインで経過した期間です。 平均 秒
エレメント数 PCollectionに追加されたエレメント数の合計です。 合計 数
推測バイト数 PCollectionに追加された見積りバイト数です。 平均 数
失敗 ジョブが失敗したかどうかを表します。 ステータス ブーリアン
ステータス パイプラインの現在のステータスを表します。
対応している値は次のとおりです。
実行中、完了、中断、失敗		 ステータス テキスト
システムラグ 処理されるまでにデータが待機していた最長時間です。 平均 秒
PD使用量の合計 アクティブパイプラインに関連するすべてのワーカーで使用された継続ディスクのギガバイト秒の合計です。 合計 秒
メモリ使用量時間の合計 データフローに割り当てられたデータのギガバイト秒の合計です。 合計 秒
シャッフルデータ処理の合計 データフローに処理されたシャッフルデータサイズの合計です。 合計 バイト
ストリーミングデータ処理の合計 データフローに処理されたストリーミングデータサイズの合計です。 合計 バイト
VCPU時間の合計 データフローでかかったvCPU時間の合計です。 合計 秒
ユーザーカウンター ユーザー定義のカウンターメトリックです。 ステータス ブーリアン

しきい値設定

  • 全体の設定
    1. Site24x7にログインし、［管理］をクリックします。
    2. ［設定プロファイル］→［しきい値と可用性］に移動します。
    3. 画面右上の［しきい値プロファイルの追加］から［しきい値プロファイル］を選択します。
    4. 監視タイプで［Cloud DataFlow］を選択後、表示名にプロファイル名を入力します。
    5. 各メトリックに対してしきい値を設定し、［保存］をクリックします。
  • 監視ごとの設定
    1. Site24x7にログインし、［Cloud］→［GCP］→［GCP監視名］→［Cloud DataFlow］に移動します。
    2. リソース監視名をクリック後、表示名横の［Hamburger icon］アイコンから［編集］を選択します。
    3. しきい値と可用性項目で、［＋］（新規追加）または［鉛筆］（編集）アイコンをクリックします。

IT自動化

IT自動化により、しきい値違反発生時に設定したアクションを自動で実行します。

詳細は、こちらのページをご確認ください。

設定ルール

設定ルールにより、しきい値プロファイル、通知プロファイル、監視グループなどの設定を自動で設定できます。

詳細は、こちらのページをご確認ください。

サマリー

［サマリー］タブで、上記監視メトリックデータを表示します。
アクセス方法は次のとおりです。

  1. ［Cloud］→［GCP］→［GCP監視名］→［Cloud DataFlow］に移動します。
  2. 監視リソース名を選択します。
  3. ［サマリー］タブをクリックします。

設定の詳細

［設定の詳細］タブで、監視の設定内容を表示します。
アクセス方法は次のとおりです。

  1. ［Cloud］→［GCP］→［GCP監視名］→［Cloud DataFlow］に移動します。
  2. 監視リソース名を選択します。
  3. ［設定の詳細］タブをクリックします。

レポート

レポート機能により、リソースの監視データを表示し、パフォーマンスを把握できます。

レポートの表示方法は次のとおりです。

  1. ［レポート］をクリックします。
  2. ［Cloud DataFlow］を選択します。
  3. ［可用性サマリーレポート］、［パフォーマンスレポート］などのレポートタイプを選択します。

監視画面の［サマリータブ］からもレポートを表示できます。
表示方法は次のとおりです。

  1. ［サマリー］タブに移動します。
  2. ［可用性］をクリックして、可用性サマリーレポートを表示します。
  3. 監視データ名横にあるアイコンをクリックして、パフォーマンスレポートを表示します。

関連ガイド