Testim Docs JA

Tricentis Testim ユーザー制作日本語翻訳ドキュメント

テスト実行

Testim Docs

「Test Runs」画面では、過去の実行に関する統計を表示できます。この画面には、選択したすべてのテストの集計統計と、特定のテストの統計(例

/不合格回数、平均テスト時間など)が表示されます。画面は次のタブに分かれています。

  • Counted Runs - このタブには、CLI、CI、またはスケジュール実行によってローカルまたはリモートで実行された過去の実行の統計が表示されます。これらのテスト実行は、サブスクリプションクォータにカウントされます。
  • Local Editor Runs - このタブには、エディターから直接実行された過去の実行の統計が表示されます。これらのテスト実行は、サブスクリプションクォータにカウントされません。

Test Runs 画面へのアクセス方法

「Test Runs」画面にアクセスするには、2 つの異なる方法があります。

  • メインメニューで、Runs > Test runsをクリックします。

Test Runs 画面の一覧ビュー

  • Execution Runs画面(Runs => Executions)から、実行を選択し、テストを右クリックして、Test historyオプションを選択します。

Execution Runs 画面から Test Runs を開く操作

Test Runs 画面の要素

Test Runs 画面には、選択したフィルターに従って、特定のテスト/すべてのテストの最後の実行に関する統計が表示されます。特定のテストからこの画面に移動すると、そのテストのみの統計が表示されます。特定のテスト実行をクリックすると、Test Editor内でそのテスト実行が開き、ドリルダウンしてテスト実行の詳細(例

)を確認できます。

Test Runs 画面の要素説明付きスクリーンショット

集計統計

集計統計セクションの例

集計統計セクションには、すべての実行の結果の次の要約が表示されます。

  • Success - 選択した時間中に実行されたすべての実行のうち、成功した実行の割合。
  • Passed - 成功したテスト実行の数
  • Avr. duration - 実行の平均時間

フィルター

次のパラメーターに基づいて統計をフィルタリングできます。フィルターは「counted runs」タブと「local editor runs」タブ間で共有されます。複数のフィルターを選択することで、フィルターを集約できます。

期間フィルター

フィルターをクリックし、事前定義されたオプションのいずれかを選択するか、Custom を選択して特定の開始日と終了日を指定します。

期間フィルターの選択画面

検索

検索クエリを入力して、一致するテスト名を持つテスト結果を検索します。

テスト名での検索ボックス

詳細フィルター

Advanced Filtersボタンをクリックして、Filter Test Runsペインを開きます。

Advanced Filters ボタンとペイン

詳細フィルターペインには、次のフィルターがあります。

  • Branch - Select Allを選択してすべてのフィルターを含めるか、リストから特定のブランチを選択します。
  • Tests - 特定のテストまたはすべてのテストを選択します。
  • Status - 特定のテスト実行ステータスを選択します。
  • Failure type - 失敗した実行には理由がタグ付けされます。このフィルターを使用して、リストされている理由の 1 つでタグ付けされた実行を表示できます。このフィルターを選択すると、失敗したテストのみが表示されます。
  • Browser - テスト実行で使用されたブラウザを選択します。(Web のみ)
  • Test Owner - テストの該当する所有者を選択します。テストの所有者は、必ずしもテストを実行したユーザーではありません。

このフィルター表示の保存について詳しくは、フィルター表示の保存を参照してください。

実行グラフ

実行グラフには、時間(x 軸)に対するテスト実行時間(y 軸)が表示されます。各バーは次のようにテスト実行を表します。

  • 緑のバー - 合格
  • 赤のバー - 不合格
    バーにカーソルを合わせると、その詳細が表示されます。

実行グラフのバー表示

CSV ダウンロード

デフォルトでは、テスト実行には最大 200 件の結果が表示されます。200 件を超える結果がある場合、CSV をダウンロードするとすべての結果が含まれます。CSV ダウンロードは「counted runs」でのみ利用可能です。 CSV をダウンロードするには、CSV Downloadボタンをクリックして、保存先を選択します。

CSV Download ボタン

テスト失敗のタグ付け

Tag Test Failureボタンをクリックして、以下のリストにあるすべての失敗した実行に失敗タイプをタグ付けします。詳細については、失敗した実行への失敗タイプのタグ付けを参照してください。

Tag Test Failure ボタンの位置

テスト実行の詳細

テスト実行の詳細には、フィルターの条件に一致するすべてのテスト実行がリストされます。

パラメーター 説明
Test Name テスト実行のテスト名。
Branch 実行されたテストを保持するブランチ
Browser (web) テスト実行で使用されたブラウザ。
Device (mobile) テスト実行で使用されたデバイス。
OS テスト実行で使用されたオペレーティングシステム。
Started 実行が開始された時刻。
Duration テスト実行の時間。
Result Labels 実行に追加された結果ラベル。クリックしてラベルを表示します。
Failure Type 実行に追加された失敗タグ。失敗タグを追加するには、「Tag test failure」リンクをクリックします。詳細については、 失敗した実行への失敗タイプのタグ付け を参照してください。
Status テスト実行のステータス。 Failed — 赤い ×マーク
Failed with retries — 黄色の感嘆符付き赤い ×マーク
Passed — 緑の ✓マーク

リトライの表示

テスト実行にいくつかのリトライがあった場合、リトライの結果を表示できます。リトライを伴うテスト実行には、ステータスアイコンに黄色の(!)マークが付きます。
リトライとその設定方法について詳しくは、CLI の失敗テストリトライを参照してください。

リトライがあるテスト実行の表示例

特定の実行のすべてのリトライ結果を表示するには:

  1. 結果行にカーソルを合わせます
  2. 「Test retries」アイコンをクリックします
  3. 表示したい結果を開きます

Test retries アイコンからリトライ結果を確認