AWS Glue監視連携

Glueジョブ監視でサポートしているメトリックは次のとおりです。

次のSpark、Sparkストリーミング、Python Shellジョブタイプのメトリックは、AWS Glueコンソールの［詳細プロパティ］→［ジョブメトリック］が有効化されている場合にのみ収集されます。

Sparkストリーミングタイプのみ次のメトリックが表示されます。これらメトリックはAWS Glueコンソールの［詳細プロパティ］→［ジョブメトリック］が有効化されている場合にのみ収集されます。

次のSpark、Sparkストリーミング、Python ShellジョブタイプのGlueオブザーバビリティメトリックは、AWS Glueコンソールの［ジョブ詳細］タブで、［詳細プロパティ］→［ジョブオブザーバビリティ］オプションが有効となってる場合にのみ収集されます。

Glue Crawler監視でサポートしているメトリックは次のとおりです。

Glueジョブデータは次のタブで表示されます。

［サマリー］

チャート形式でメトリックの概要とイベントタイムラインを表示します。
Glueジョブパフォーマンスと直近のジョブ実行情報もこのタブで表示されます。

［ジョブ実行］

全ジョブ実行に関する情報を表示します。

実行ID、ステータス、開始時間、終了時間、ロググループ名で情報をフィルターできます。
実行IDハイパーリンクをクリックすると、ジョブ実行詳細ページに移動し、ジョブ実行の概要を表示します。

［接続］

ジョブの接続を表示します。
接続名、タイプ、作成時間といったオプションで情報をフィルターできます。

［トリガー］

トリガー名、タイプ、作成時間といったGlueトリガー情報を表示します。

［設定］

表示名、タイプ、作成時間、スクリプトロケーションといったGlueジョブ監視に関する情報を表示します。
ソース詳細項目でレポジトリープロバイダー、レポジトリー名、ブランチ名といったジョブが保存されているリモートリソースを表示します。

［障害］

障害の開始時間、終了時間、期間、コメントといった情報を表示します。

［インベントリー］

ジョブ名、リージョン、監視ライセンスカテゴリーなどの情報を表示します。
このタブからしきい値と可用性および通知プロファイルの設定と表示を行えます。

［ログレポート］

Glueジョブ監視のログステータスの集約レポートを表示します。CSV形式でダウンロードも可能です。

Glue Crawlerデータは次のタブで表示されます。

［サマリー］

チャート形式でメトリックの概要とイベントタイムラインを表示します。
Glue Crawlerパフォーマンスと直近のクローラー実行情報もこのタブで表示されます。

［クローラー実行］

すべてのクローラー実行の情報を共有します。実行ID、ステータス、開始時間、終了時間、DPU時間で情報をフィルターできます。

実行IDハイパーリンクをクリックすると、クローラー実行詳細ページに移動し、クローラー実行の概要を表示できます。

［分類子］

クローラーで指定されている分類子情報を表示します。分類子名、タイプ、作成時間でフィルターできます。

［クローラーソース］

クローラーがデータを抽出するソース情報を表示します。ソース名、接続名、パス、テーブル数を表示します。

［設定］

表示名、ステータス、バージョン、作成日といったGlue Crawler監視に関する設定情報を表示します。

［障害］

障害の開始時間、終了時間、期間、コメントといった情報を表示します。

［インベントリー］

クローラー名、リージョン、監視ライセンスカテゴリーなどの情報を表示します。
このタブからしきい値と可用性および通知プロファイルの設定と表示を行えます。

［ログレポート］

Glue Crawler監視のログステータスの集約レポートを表示します。CSV形式でダウンロードも可能です。