このツールについて
テストサイクルの終わりに、関係者が知りたいのは 3 つです。どれだけテストしたか、どれだけ合格したか、リリースしても安全か。このレポートでは、合格率を「合格 ÷(合格 + 不合格)」で計算するため、ブロックやスキップされたテストで数値が上下することはありません。実行進捗は「試行したすべて ÷ 総数」で計算するので、未テストの作業も見えたままになります。ステータスの件数の合計が総数と一致しない場合や、不合格のテストや Critical の欠陥があるのに Go を推奨している場合は警告します。ほとんどのメールクライアントはスタイルシートを無視するため、HTML 出力はテーブルレイアウトとインラインスタイルを使っています。「Copy for email」(メール用にコピー)で整形済みの HTML をクリップボードに入れ、Outlook や Gmail に貼り付けられます。
使い方
- ビルド、テスト期間、環境を入力します。
- 総数、合格、不合格、ブロック、スキップ、未実行の件数と、重大度別の起票欠陥数を入力します。
- 主な問題を列挙し、「Go」「Go with risks」(リスク付き Go)「No-go」のいずれかを選びます。
- Markdown かテキストをコピーするか、HTML メール形式で「Copy for email」(メール用にコピー)を使います。
テスト実行レポート作成ツール のよくある質問
合格率を実行済みのテストだけで計算するのはなぜですか?
ブロックやスキップされたテストは実行されていないため、合格も不合格もしていません。それらを分母に含めると、本当の失敗が未テストの作業に埋もれてしまいます。未テストの部分が見えるよう、実行進捗は別に報告します。
「Go with risks」(リスク付き Go)とはどういう意味ですか?
リリースは進められるものの、既知の問題や未テストの領域が残っており、意思決定者がそれを受け入れている状態です。リスクを明示して記録するため、それらを「Key issues」(主な問題)に列挙してください。
数値の合計が合わないのはなぜですか?
総数は「合格 + 不合格 + ブロック + スキップ + 未実行」と等しくなるはずです。一致しない場合は、テストが二重に数えられたか、漏れています。レポートを送る前に修正できるよう、ツールが差分を表示します。