Nexus StudioQAで行うSmart Monkeyテスト。
Nexus StudioQAのSmart Monkeyテストは、テストの許可を得たウェブアプリケーションを自律的に検査するセキュリティ機能です。対象を巡回し、フォームを送信し、破壊的な影響のない検査用データを送り、検出事項ごとに重大度、画面画像、再現用スクリプトを記録します。自分の端末上で動作し、何かを検出すると終了コード1で終了して、CI用のSARIFを出力します。
執筆: Verdict System LLCのNexus StudioQAチーム。
最終更新日: .
検査対象
検査機能では、検出事項の種類ごとに重大度が固定されています。SARIF出力では、最重大と高をerror、中をwarning、それ以外をnoteとして扱います。
| 重大度 | SARIFレベル | 検出事項の種類 |
|---|---|---|
| CRITICAL | error | XSSの実行, SQLインジェクション (ブラインド型, 真偽値ベース型および時間ベース型を含む), コマンドインジェクション, サーバー側テンプレートインジェクション |
| HIGH | error | アクセス制御の不備, 5xxサーバーエラー, CORSの設定不備, 機密ファイルの露出, SSRF, 確認済みのIDOR, パストラバーサル, XXE, 一括代入, 安全でないデシリアライズ, コールバックで確認されたブラインドXSS |
| MEDIUM | 警告 | クライアント側の実行時エラー, 安全でないCookieフラグ, セキュリティヘッダーの欠落, オープンリダイレクト, GraphQLイントロスペクションの有効化状態の放置 |
| LOW | 注記 | IDORのように見えるものの単一のセッションでしか観測されていないオブジェクト参照, および実行に失敗したスキャン |
スキャンの実行方法
スキャンは複数の段階で構成されます. 既定ではすべての段階を画面表示なしで実行し, 最初の不具合を記録した時点で停止します. agent段階は明示的に有効にする必要があり, 既定の実行には含まれません.
| コマンド | 主な機能 |
|---|---|
nexus monkey <url> | すべての段階をスキャンし, 最初の不具合で停止します (FASTモード). |
--deep | 不具合を記録して切り分け, さらに検索を続けます. |
--phase=<name> | 次のいずれか1つの段階を実行します: pre-auth, post-forms, auth-transit, post-auth, http-probes, ssrf, cmdi, xss-oob, sqli, ssti, lfi, xxe, graphql, deser, mass-assign, idorまたはagent. |
--seed=<n> | 以前の実行でのランダムな選択を再現します. 実行のたびにシード値が出力されます. |
--mobile | iPhoneのユーザーエージェント, 390 × 844の表示領域およびタッチ操作を再現します. |
--chaos[=ms] | すべてのリクエストに遅延を追加します. 値を指定しない場合は3500 msです. |
--headed | 画面表示なしで実行する代わりにブラウザーを表示します. |
スキャンの影響を抑える仕組み
実行前に許可を求めます
スキャンの開始前に, 名前を明示した実行者が対象を指定して
AUTHORIZEDと入力すると, その記録が自身の証跡ディレクトリツリーに書き込まれます. 許可されなかったスキャンは終了コード2で終了し, 何もスキャンしません.攻撃用データは非破壊的です
送信前にフィルターがDROP, DELETE, UPDATEおよびINSERTなどの破壊的なSQLを除外し, スキャナーは文言から状態を変更する操作が推測されるフォームやURLをスキップします. また, HTTP層の検査にはGETのみを使用します. ただしフォームの送信は行うため, テスト環境を対象にしてください.
ブラインド型の検出結果は利用者側で確認します
SSRF, ブラインドXSSおよびコマンドインジェクションは応答に痕跡を残しません. スキャナーは独自の待ち受け処理を実行し, 攻撃用データに一意のURLを組み込み, 対象からのコールバックを受信すると検出結果を確定します. 公開のコールバックサービスは使用しないため, URLや攻撃用データが第三者に送信されることはありません.
未完了のスキャンを問題なしとは判定しません
終了コード0は問題なし, 終了コード1は脆弱性の記録あり, 終了コード2はスキャン未完了または未許可を意味します.
保存されるもの
evidence/monkey-audits/の下にセッションごとのフォルダーを1つ作成し, その中に検出結果ごとのフォルダーを保存します. Studioでは, セキュリティ画面のスキャンを実行にSmart Monkeyがあります. 最新の10セッションが保持され, NEXUS_MONKEY_RETAINで保持数を変更できます.
| ファイル | 概要 |
|---|---|
audit_report.json | 機械可読形式で記録された検出結果. |
screenshot.png | 検出時点のページ. |
replay.webm | 各検出結果にコピーされるセッションの録画. |
replay.mjs | 検出事項を再現できる実行可能なコード. |
session_summary.json | セッション全体をまとめた索引. |
results.sarif | GitHubのコードスキャンやGitLabで利用できるSARIF 2.1.0形式で、検出事項ごとに1件の結果を記録します. nexus monkeyはStudioなしでCIランナー上にこのファイルを書き出します. |
問題が検出されなかった実行でも保証できないこと
終了コード0は、この一連の検査でスキャンが到達したページに問題が見つからなかったことを意味します. これはスキャナーであり、侵入テストではありません。利用可能なセッションで巡回できる範囲しか確認できません. API監査とAPI認証の再実行は明示的な有効化が必要です(NEXUS_API_AUDIT, NEXUS_API_ACTIVE)。AIによる検出事項の優先度判定も同様です(NEXUS_SECURITY_AI).
よくある質問
Smart Monkeyはどのウェブサイトに対しても実行できますか?
いいえ。自身が所有するシステム、またはテストの許可を得たシステムに限ります. 対象に対して
AUTHORIZEDを指定するまで、スキャンは開始されません. 利用規定対象のデータを変更または削除しますか?
送信内容のフィルターは破壊的なSQLを除外し、スキャナーは状態を変更するフォームをスキップしますが、フォームの送信やテスト用データの送信は行います. 本番データではなく、ステージング環境などのテスト環境で実行してください.
CIで実行できますか?
はい.
nexus monkeyはStudioなしで動作し、results.sarifを書き出して終了コード0、1、2のいずれかを返すため、パイプラインの続行条件にできます.スキャンデータが自分のマシンの外へ送信されますか?
スキャンによる通信の送信先は、指定した対象のみです. 応答に直接現れない検出事項はスキャン実行マシン上のリスナーで確認され、検出事項は証拠フォルダーに保存されます. 製品から当社への接続は、ライセンス確認のみです.