Continuous Testing と CI/CD のトラブルシューティング

概要

このページでは、Continuous Testing と CI/CD に関する問題のトラブルシューティングに役立つ情報を提供します。さらにヘルプが必要な場合は、Datadog サポートにお問い合わせください。

用語

CI バッチ

継続的インテグレーションまたは継続的デリバリー (CI/CD) パイプラインまたは Datadog Synthetic Monitoring API を通してトリガーされる Continuous Testing テストのグループです。

テスト実行

API やブラウザテストといった Continuous Testing のテストの 1 回の実行。再試行が構成されている場合は、個々のテスト実行としてカウントされます。たとえば、2 回の再試行を伴うテストは、最大 3 回の関連するテスト実行を持つことができます。

並列テスト

CI/CD パイプラインで別の Continuous Testing のテストと同時に実行される Continuous Testing のこと。いくつのテストを並行して実行するかを設定するには、Continuous Testing の設定ページで並列化の設定を行います。

バッチタイムアウト

バッチタイムアウトは、コンフィギュレーションファイルで設定されたポーリングタイムアウトに基づいて、バッチが妥当な時間内に完了しない場合に発生します。

実行ルール: 実行ルールは、テストの失敗が CI パイプラインに与える影響を、影響の大きいものから小さいものへと定義します (skipped、non_blocking、blocking)。これらのオプションは重み付けされ、デフォルトは最も影響の大きいものになります。UI で skipped と設定され、構成ファイルで blocking と設定されたテストは、テスト実行時にスキップされます。

実行ルールはテストのプロパティ、グローバルコンフィギュレーションファイル、あるいは個々のテストのオーバーライドファイルで設定することができます。

エクスプローラー

CI メタデータが表示されない

CI/CD テスト実行のトリガーに API エンドポイントを使用しているかどうかを確認します。CI Results Explorer に CI メタデータを入力するには、Datadog のネイティブインテグレーション、または NPM パッケージのいずれかを使用する必要があります。

CI/CD パイプライン内

CI パイプラインでテストがタイムアウトする

まず確認すべきは、グローバルコンフィギュレーションファイルでどの失敗モードフラグを渡しているかということです。複数のテストを含む CI の実行では、一部のテストは Continuous Testing の設定ページで定義された並列化設定に基づいてキューに入れられます。組織のニーズに応じて、構成と並列化の両方を調整する必要があるかもしれません。

その他の参考資料

お役に立つドキュメント、リンクや記事:

Continuous Testing と CI/CD の構成について学ぶドキュメント Datadog を使った継続的テストのベストプラクティスGITHUB