テストには引き続きPlaywright, Selenium, pytestを使えます. 私たちはそれらを置き換えるのではありません. 企業での運用に対応させるものであり, コードも証跡も履歴もお客様のものです.

Evidence Locker: すべての失敗に SHA-256 テスト証拠を。

Evidence Locker は、すべての結果を保存する Nexus StudioQA の画面です。テストが失敗すると、詳細な調査報告書、メタデータ、生ログ、画面の画像が残り、実際の失敗では動画も残ります。封印は任意です。各ファイルを SHA-256 でハッシュ化し、記録を直前の記録につなぐことで、検証時に最初に変更された記録を特定できます。

執筆: Verdict System LLCのNexus StudioQAチーム。

最終更新日: .

テスト失敗時に残るもの

ファイル保有するデータ
report.mdMarkdown 形式の詳細な調査報告書。Studio がなくても読めます。
metadata.json実行に関する機械可読の項目。証拠保全の連鎖で封印されるファイルでもあり、metadata.json を含むフォルダを1件の記録とします。
raw-data.jsonコンソール出力、ネットワークエラー、セキュリティ上の問題、ページエラー、性能の測定データ。
screenshot.png最後のフレームの表示領域を撮影した画像1枚。
video.webmセッションの動画。実際の失敗時に保持されます: 既定では BREACHED、BREACHED_FLAKY、CHAOS_BREACHED が対象で、設定で有効にすると TIMEOUT と BLOCKED も対象になります。

封印と検証

封印は、Studio で初めて実際の不具合または誤検知と判定したとき、または nexus verify --seal を実行したときに開始されます。記録は、Node.js の組み込み crypto のみを使用して、追記専用の単一台帳 evidence/chain-of-custody/ledger.jsonl に保存されます。

状態意味終了コード
UNVERIFIED台帳がまだないため、何も証明できません。黙って OK とすることはありません。2
VERIFIED封印済みのすべての記録とファイルが、それぞれのハッシュ値と一致しています。0
TAMPER DETECTED封印後にファイルまたは台帳の行が変更されています。整合性が最初に崩れた記録を特定します。1
PURGED封印済みのフォルダが意図的に削除されており、誰がいつ削除したかが台帳に記録されています。n/a

保存場所と容量制限の仕組み

  • お使いのディスク上に保存

    証拠はテストを実行したマシンに書き込まれます。製品が自動で行う通信はライセンス確認だけで、テストデータは送信されません。

  • 全体で1つの容量上限

    NEXUS_EVIDENCE_MAX_GB は、すべての証拠の合計容量を制限します。既定値は20 GBです。各テストとブラウザーの最新の実行記録、および証拠の管理履歴台帳は削除されません。

  • 削除の履歴も残す

    封印済みフォルダーを削除する前に、台帳に PURGE が記録されます。そのため、検証結果は改ざんではなく PURGED になります。台帳に記録できない場合、フォルダーは削除されません。

封印では証明できないこと

封印が証明するのは、封印後にファイルが変更されていないことであり、封印前の内容が正しかったことではありません。台帳は証拠と同じディスク上にあるため、封印時に出力される末尾のハッシュ値は、チケットやリリースノートなど別の場所に保管してください。テスト証拠の管理履歴では、実際の nexus verify の出力とその限界を示しています。ダウンロードの検証は別の検証で、インストーラーのコード署名と SHA-256 を確認します。

よくある質問

  • テスト失敗時、Evidence Lockerは何を保持しますか?

    詳細調査レポート、メタデータ、生ログ、最終フレームのスクリーンショットを含むフォルダーです。実際の不具合の場合は動画も含まれます。お使いのAIを接続すると、AIによる分析がレポートに追加されます。

  • SHA-256による封印は自動で行われますか?

    いいえ、有効にする必要があります。Studio で初めて「実際の不具合」または「誤検知」と判定するか、nexus verify --seal を実行すると開始されます。台帳がない場合、検証は UNVERIFIED を報告し、終了コード2で終了します。

  • 封印は証拠が正しかったことを証明しますか?

    いいえ。編集後に記録を封印すると、編集後の内容が封印されます。対象は封印済みの記録だけです。最初の封印より前に書き込まれた証拠は、封印するまで UNVERIFIED のままです。

  • 証拠が自分のマシンの外に送られることはありますか?

    自動で送られることはありません。Jira や Slack などの接続先には、お使いのマシンから直接アクセスし、当社を経由することはありません。追加の添付を有効にしない限り、Jira に添付されるのはスクリーンショットだけです。

お客様自身のマシンで実行しましょう。

お使いのマシンで全機能を無料でお試しください. カードは不要です.