GCP Composerのデータを当社のプラットフォームに報告するためのクラウド統合を提供しています。ここでは、統合を有効にする方法と、どのようなデータを収集するかを説明します。
統合機能の有効化
統合を有効にするには、標準的な手順に従って、 GCPサービスに接続してください 。
設定およびポーリング
設定オプションを使用し、ポーリングの頻度を変更し、データを絞り込むことができます。
デフォルト ポーリング GCP Composerインテグレーションの情報。
- New Relicのポーリング間隔：5分
データの検索と使用
統合データを探すには、 one.newrelic.com > Infrastructure> GCP にアクセスし、統合を選択します。
データは、次のイベントタイプに添付されます。
エンティティ | イベントタイプ | プロバイダー |
|---|---|---|
環境 |
|
|
ワークフロー |
|
|
データの利用方法については、 統合データの理解と利用 を参照してください。
メトリックデータ
この統合は、「環境」と「ワークフロー」のGCP Composerデータを収集します。
作曲環境データ
メトリック | ユニット | 説明 |
|---|---|---|
| Count | これまでに確認されたComposer APIリクエストの数。 |
| ミリ秒 | Composer APIコールレイテンシーの分布。 |
| Count | DAGファイルの解析中に発生したエラーの数。 |
| Count | 現在実行中のDAG解析プロセスの数。 |
| Count | 処理のタイムアウトにより終了したファイルプロセッサの数。 |
| 秒 | すべてのDAGファイルを一度にスキャンして取り込むのにかかる秒数。 |
| Count | 現在のダグバッグのサイズ。 |
| Count | データベースインスタンスに予約されているコアの数。 |
| 秒 | データベースインスタンスのCPU使用時間。 |
| Count | データベースインスタンスのCPU使用率（0.0から1.0まで）。 |
| バイト | データベースインスタンスの使用ディスク容量（バイト）。 |
| バイト | データベースインスタンスの最大データディスクサイズ（バイト）。 |
| Count | データベースインスタンスのディスククォータ使用率（0.0から1.0まで）。 |
| バイト | データベースインスタンスのメモリ使用量（単位：バイト）。 |
| バイト | データベースインスタンスの最大RAMサイズ（バイト）。 |
| Count | データベースインスタンスのメモリ使用率（0.0から1.0まで）。 |
| Count | 実行者の空きスロット数。 |
| Count | 実行中のタスクの数。 |
| Count | タスク全体のインスタンス。 |
| Count | セロリの労働者の数 |
| Count | スケジューラーのハートビート |
| Count | キューに入っているタスクの数。 |
| Count | Airflowワーカーポッドの退避回数です。 |
| Count | 殺したゾンビタスクの数 |
コンポーザーワークフローデータ
メトリック | ユニット | 説明 |
|---|---|---|
| Count | これまでに完了したワークフローの実行回数。 |
| 秒 | ワークフローの実行完了までの期間。 |
| Count | これまでに完了したワークフロータスクの数。 |
| 秒 | タスク完了までの期間 |