混合式 QA 操作系统 · Playwright、Selenium 和 pytest · 代码和证据始终由你掌控

具备不稳定测试检测功能的 QA 操作系统,揭示测试失败的原因

Nexus StudioQA 是面向 Playwright、Selenium 和 pytest 的混合式 QA 操作系统,提供 15 种测试判定结果,并保留每次失败的证据。

Nexus StudioQA 是面向使用 Playwright、Selenium 或 pytest 的团队的 QA 操作系统。每次运行都会给出 15 种取证判定中的一种, 而不只是通过或失败, 每次失败都会连同报告、截图和日志一起归档, 若确属真实失败还会附上视频, 发布报告则会给出可发布、需谨慎或不可发布的结论。

无需信用卡。代码归你所有 · 证据归你所有。正在为团队做决策?阅读面向负责人的页面 →

Nexus StudioQA 专为这样的团队设计:他们耗费数小时排查构建失败的原因,且无法将源代码或测试数据发送到他人的云端。

15
以多种判定取代简单的通过或失败,并将失败记录封存在可验证的 SHA-256 链中
6,981
发布门禁中的测试:引擎 3,667 项,Studio 3,314 项
3 + 10
浏览器和手机配置, 以及通过 USB 连接的 Android 真机
0
我们的服务器上存储的测试数据副本

Studio 示意图, 并非实际运行。

工作原理

从测试运行到发布决策, 只需四步

运行

你的 Playwright, Selenium 或 pytest 测试可在 PC 上, Docker 中或你自己的服务器上运行。

判定

引擎读取错误和网络日志, 从 15 种判定结果中为本次运行给出一种。

证据

截图, 视频, 日志和报告均会归档, 并可通过 SHA-256 链封存。

GO / CAUTION / NO-GO

GO 要求置信度评分至少为 90, 且没有未解决的失败项。CAUTION 要求至少为 70。

不稳定测试检测 · 测试失败根因

我的测试为什么失败? 15 种判定结果, 不止通过或失败

构建标红只能告诉你出了问题, 却不能说明问题是什么。Nexus StudioQA 分析每次运行并给出判定: 顺利通过时为 SECURE, 仅在重试后通过时为 FLAKY, 应用确实存在问题时为 BREACHED, 而环境导致测试无法得出结论时则为 TIMEOUT, UNREACHABLE, BLOCKED 或 CRASHED。重试后通过绝不会被悄悄算作正常通过。

  • 不稳定测试检测。不稳定测试台账按浏览器和设备跟踪每个在多次运行中结果反复的测试。工作原理
  • 测试失败根因。服务器响应缓慢和真正的缺陷会得到不同的判定, 让你不再为误报的失败排查问题。
  • 不止于功能测试。PERFORMANCE_DEGRADED, A11Y_VIOLATION, SECURITY_VIOLATION, CHAOS_RESILIENT 和 CHAOS_BREACHED 来自负载, 无障碍, 安全和混沌测试运行。

通过

  • SECURE
  • CHAOS_RESILIENT

不稳定: 发布前先检查

  • FLAKY
  • AUTO_RECOVER
  • PERFORMANCE_DEGRADED
  • A11Y_VIOLATION
  • SECURITY_VIOLATION

失败: 应用确实存在问题

  • BREACHED
  • BREACHED_FLAKY
  • CHAOS_BREACHED
  • TEST_DRIFT

无判定: 环境中断了测试

  • TIMEOUT
  • UNREACHABLE
  • BLOCKED
  • CRASHED

试一试: 选择一种失败情况, 查看判定结果

BREACHED

失败: 确实存在问题

某次尝试中断言失败, 且没有任何环境或测试框架相关模式能解释此错误。这就是缺陷报告。

消息
expect(total).toHaveText("42.00")
证据
screenshot.pngvideo.webmraw-data.jsonreport.md
发布
计为未解决的失败项, 因此本次运行不能判定为 GO。
FLAKY

有保留地通过

应用或测试中存在不稳定因素, 且尚未修复。重试后通过绝不会被悄悄算作正常通过。

消息
第 1 次尝试失败, 第 2 次尝试通过
证据
screenshot.pngvideo.webmraw-data.json
发布
通过, 但报告和历史记录中会注明保留意见。
BREACHED_FLAKY

失败: 确实存在问题

测试失败了, 而且失败情况本身并不一致. 提交缺陷前, 请先比较各次尝试的结果.

消息
第 1 次和第 2 次尝试因不同错误而失败
证据
screenshot.pngvideo.webmraw-data.jsonreport.md
发布
计为未解决的失败项, 因此本次运行不能判定为 GO。
TEST_DRIFT

失败: 测试已过时

页面已加载, 但测试中用于定位元素的地址已失效. 出错的是测试, 而不是应用.

消息
locator.click: 超时, 未定位到任何元素
证据
screenshot.pngvideo.webmraw-data.jsonreport.md
发布
计为未解决的失败. 在红色行上打开修复行.
TIMEOUT

无法对您的应用作出判定

页面导航已开始, 但页面加载缓慢. 服务器响应缓慢绝不会被报告为产品缺陷.

消息
Timeout 30000ms exceeded
证据
screenshot.pngvideo.webmraw-data.jsonreport.md
发布
不作为缺陷报告, 也不计入产品通过率.
BLOCKED

无法对您的应用作出判定

网站触发了防护,请求并未到达您的产品。

消息
403 禁止访问, 验证码
证据
screenshot.pngvideo.webmraw-data.jsonreport.md
发布
不作为缺陷报告, 也不计入产品通过率.
UNREACHABLE

无法对您的应用作出判定

尚未观测到任何页面, 网络就已拒绝连接. 请检查 DNS、VPN 或地址.

消息
net::ERR_NAME_NOT_RESOLVED
证据
raw-data.jsonreport.md
发布
不作为缺陷报告, 也不计入产品通过率.
CRASHED

无法对您的应用作出判定

浏览器或驱动程序已崩溃. 这是基础设施问题: 请检查机器和驱动程序.

消息
目标已关闭
证据
raw-data.jsonreport.md
发布
不作为缺陷报告, 也不计入产品通过率.

示例消息. 引擎按此顺序应用这些规则, 具体说明见判定结果页面.

全部 15 种判定结果详解 →

了解更多: 不稳定测试还是真实缺陷, 应用正常却失败的测试以及界面变更后失效的测试. 不稳定测试的成本有多高? 用您自己的数据算一算.

Evidence Locker

每次失败, 均以 SHA-256 封存

每个失败的测试都会连同报告、截图和日志一起归档, 若确属真实失败还会附上视频。记录可通过 SHA-256 证据保管链封存, 以便任何人日后核查内容是否被修改, 您也可以自行验证封印。测试证据管理不再只是某人笔记本电脑上的一个截图文件夹。

  • 篡改可查. 无需登录任何系统, 即可自行验证封存完整性.
  • 在您自己的机器上。 除非您连接 Jira、Slack 或 AI 服务提供商等服务, 否则证据会一直留在本地。

查看演示证据 → · 证据保管链如何运作 →

示意内容, 并非真实运行结果.

发布就绪情况

可发布、需谨慎或不可发布: 让发布决策有据可依

管理层报告将一次运行归纳为一个决策, GO、CAUTION 或 NO-GO, 并附上支撑决策的判定与证据。是否具备发布条件, 管理者无需打开日志, 看一页报告就能了解。

GO

实际检查已通过. 不稳定测试单独跟踪, 不会混入通过率中.

CAUTION

结果不稳定、性能超出预算或存在无障碍问题, 都需要在发布前检查.

NO-GO

置信度评分低于 70。其背后的每项失败均已列出并附有证据。

发布门禁如何作出决策 →

功能

QA OS 的每项功能, 从判定到发布

您的测试始终归您所有: 使用标准的 Playwright、Selenium 和 pytest 代码. Studio 可创建、运行、验证测试并对其进行压力测试, 您随时可以带着文件离开. 文件是什么样的

创建

Patrol

探索您的应用, 找出需要测试的内容.

AI writer

使用您选择的模型起草测试.

Nexus Recorder

无需 AI 即可编写 Playwright 或 Selenium 代码, 并按固定规则为每个选择器评分.

Test Adapter

从其他来源导入测试, 并按规则将其转换为 Playwright 测试.

运行

设备与移动端

三种浏览器、十种手机配置, 支持通过 USB 连接真实 Android 设备.

Watch

仅在状态发生变化时告警.

CI/CD

为 GitHub Actions、GitLab、Azure、Jenkins 和 CircleCI 编写流水线文件.

Docker 和 SSH

在您的 PC、容器或 Linux 服务器上运行.

验证

Evidence Locker

每次失败都有报告、截图和日志。

API 测试

录制并运行 API 测试套件。

History

记录每次运行,附带不稳定测试台账。

Visual Regression

发现不同运行之间的像素变化。

Executive Report

为不看日志的人提供一页概览。

压力与安全

Chaos Lab

主动制造网络故障,看看哪些功能依然可靠。

Load

在压力下衡量性能。

安全

运行中的检查。

无障碍

在运行过程中检查规则。

解决方法

修复此行与自愈

自愈前先征求同意,并展示差异。

定位器健康状况

选择器映射显示哪些选择器可能失效。

风险排名

优先运行最可能失败的测试。

全部功能 → · Studio 导览 →

路线图

当前已实现的功能,以及接下来的计划

现在即可在你的 PC 和自有服务器上使用一体化 QA 工作室。其余功能将按以下顺序逐步构建。

查看完整路线图 →

目前已实现

8
除特别注明外,此处列出的所有功能目前均已在产品中可用。

平台

Windows 11 应用, 引擎可在您的任意自有环境中运行

Studio 是一款 Windows 11 桌面应用。引擎可在该电脑上、Docker 中或通过 SSH 连接的 Linux 服务器上运行(已通过模拟测试,尚未在真实服务器上测试),每个工作区都会记住其测试的运行位置。

平台

三种浏览器、十种手机配置、真实 Android 设备

支持 Chromium、Firefox 和 WebKit, 十种手机和平板电脑模拟配置, 以及通过 USB 连接的 Android 真机. 目前仅通过 WebKit 模拟来覆盖 iPhone 和 iPad 设备.

平台

您的测试和证据保留在您掌控的机器上

Studio 与运行在您 PC、Docker 或通过 SSH 访问的 Linux 服务器上的引擎通信. 产品本身与我们的唯一连接是许可证验证. 测试和证据只有通过您配置的服务才会离开您的机器, 例如 AI 提供商、Jira 或 Slack.

数据与人工智能

自主启用、本地优先的人工智能

默认使用本地 Ollama 模型,云端回退功能只有在你主动开启后才会启用。只有你选择时,才会使用云服务提供商或命令行 AI 工具。

数据与人工智能

Recorder、Vet 与判定结果

Nexus Recorder 无需人工智能即可编写 Playwright 或 Selenium 代码, 并按固定规则为每个选择器评级. 每次运行都会以 15 种判定结果之一结束, 重试后通过的测试会标记为 FLAKY, 绝不会悄然算作通过.

数据与人工智能

API、视觉、无障碍、负载、混沌测试与 Smart Monkey

提供不止于点击操作的多种测试类型, 还有不稳定测试台账、仅在状态变化时发出提醒的 Watch, 以及通过 SHA-256 保管链封存的记录.

Test Adapter

Test Adapter, 以真实测试套件实测

导入在其他工具中编写的测试, 并按规则转换为 Playwright 测试. 我们曾对两个公开的 Cypress 测试套件进行一次测评: 其中一个约有一半文件可完全按规则转换, 无需后续处理; 另一个的测试依赖项目代码, 没有文件能完全转换. 其余文件保留原始代码行, 以便选择使用 AI 或手动编辑.

集成

问题跟踪工具、聊天工具与 CI 文件

支持 Jira、Azure Boards、GitHub Issues、Slack、Microsoft Teams 和 Telegram, 各项集成在您开启前均保持关闭. CI 页面可为 GitHub Actions、GitLab CI、Azure Pipelines、Jenkins、CircleCI 或 Bitbucket 生成流水线文件.

进行中

1
正在进行.

平台

Windows 2.0 版本

正在发布首个公开安装程序. 构建时以 Verdict System LLC 的名义进行代码签名, 但在积累起信誉之前, Windows SmartScreen 仍可能发出警告.

下一步计划

9
计划在当前进行中的工作之后开展. 计划可能调整.

平台

混合云运行器

在同一个 Studio 中, 可在您的 PC、自有服务器或您选择的由我们运营的云端运行相同测试. 默认仍使用您自己的机器.

平台

Linux 上的 Studio

在 Linux 桌面上运行 Studio 本身, 而不仅仅是引擎.

数据与人工智能

更多本地模型

提供更多可在您本机上运行的模型, 让更多团队能够完全在本地使用人工智能.

数据与人工智能

隔离开关

计划推出一项设置,用于禁用云端 AI 服务提供商以及 Studio 中的云端回退功能。

Test Adapter

迁移验证

在停用原有测试前,通过报告确认转换后的测试与原有测试行为一致。

Test Adapter

Java 和 C# 测试转换

不仅能读取 Java 和 C# 测试套件,还能转换它们。

集成

更多跟踪与告警工具

支持将失败信息发送到更多问题跟踪工具、测试管理工具和值班告警系统,并提供电子邮件告警。

信任

更完整的软件物料清单 (SBOM)

提供 CycloneDX 清单, 列出安装程序捆绑的所有组件, 而不仅仅是 JavaScript 软件包.

信任

单点登录

通过您自己的身份提供商登录 Nexus StudioQA 账户.

后续计划

6
我们希望前进的方向。本栏中的排列顺序不代表承诺。

平台

本地 MCP 服务器

让您自己的 AI 助手通过位于 127.0.0.1 的本地模型上下文协议 (MCP) 服务器操控 Nexus StudioQA, 该服务器在您开启前保持关闭. 此项工作将在 Linux 相关工作之后开展.

平台

云端 iPhone 真机

在 iPhone 真机上运行测试, 初期使用其他公司运营的实验室, 之后可能使用我们自己的实验室.

平台

macOS

在 Mac 上使用 Studio。

Test Adapter

支持转换更多来源

支持将更多测试格式、Gherkin 和 API 集合转换为 Playwright。

集成

Marketplaces

在我们所集成工具的应用市场中上架。

信任

鉴证报告

目前我们尚未取得 SOC 2 报告、ISO/IEC 27001 证书或 VPAT® 无障碍报告. 取得这些报告和证书是我们的发展方向.

这只是方向,并非承诺。我们不提供日期,顺序可能调整,项目也可能取消。目前,“当前推进”、“下一步计划”或“未来”下的所有项目均未推出,也未定价。

混合部署 QA 平台

混合架构设计:本地优先,云端由您选择

Studio 是一款 Windows 11 应用。引擎可在该电脑上、Docker 中,或通过 SSH 在 Linux 服务器上运行,既支持本地部署,也支持您自己的云端虚拟机。产品仅在许可证检查时连接我们。Nexus Cloud 是可选的托管运行环境,目前处于计划阶段,尚不可用。隔离模式正在开发中,可阻止连接 Nexus Cloud、AI 服务提供商、工单系统和聊天服务。阅读混合 QA 介绍。

浏览器与设备

支持 Chromium、Firefox 和 WebKit,提供十种手机和平板模拟配置,并支持通过 USB 连接真实 Android 手机。目前通过 WebKit 模拟支持 iPhone 和 iPad。

  • Chromium
  • Firefox
  • WebKit
  • 10 种手机配置
  • 通过 USB 连接 Android

问题跟踪工具、聊天工具和 CI

每项集成都默认关闭,由你主动开启。CI 界面会为你生成流水线文件。

  • Jira
  • Azure Boards
  • GitHub Issues
  • Slack
  • Microsoft Teams
  • Telegram
  • GitHub Actions
  • GitLab CI
  • Azure Pipelines
  • Jenkins
  • CircleCI

比较部署方案: 掌控自己的基础设施、自托管 Playwright和无需隧道测试 localhost。

信任

从设计上确保你的数据无需离开本地

0

不向我们发送任何测试数据

产品与我们之间唯一的连接是许可证检查。

#

SHA-256 保管链

记录经过封存,您可以自行验证。

AI

AI 按需启用,本地优先

默认使用本地模型。云服务提供商在您主动启用前始终处于关闭状态。

</>

不受平台锁定

标准的 Playwright、Selenium 和 pytest 文件。随时可以带走。

Nexus StudioQA 自身仅发起一种连接,不传输任何测试数据:许可证检查。密钥仅在激活时发送一次;此后的每次检查都会发送机器哈希值、一次性随机数、令牌以及机器的主机名、操作系统和 Studio 版本。

默认情况下,我们不会接收您的测试数据;Nexus Cloud 为可选功能,您可以针对每次运行决定是否使用。我们会保留您的电子邮箱地址、账单状态和许可证记录。

信任中心 · 所有传出数据 · 能为您的团队做什么 · 完整术语表

问题

测试为何失败,直接给出答案

  • 什么是 QA 操作系统?

    QA 操作系统将自动化测试的创建、运行、评判和证据存储集中于一处, 无需为每个步骤使用独立工具. Nexus StudioQA 是面向 Playwright、Selenium 和 pytest 的 QA 操作系统, 可在您自己的电脑、Docker 或 Linux 服务器上运行.

  • 不用云端网格也能运行 Playwright 测试吗?

    可以。Playwright 可以在您自己的电脑、Docker 或 Linux 服务器上运行,云端测试网格并非必需。Nexus StudioQA 在此基础上增加了录制器、定时运行、结果判定和证据留存功能,测试仍然是标准的 Playwright 文件。它运行于 Windows 11, 最低需要 16 GB 内存。自托管 Playwright 页面介绍了各个选项。

  • 不稳定测试会耗费我多少小时?

    这取决于您的实际数据,因此 Nexus StudioQA 不提供通用数值。将团队每周排查的失败次数乘以每次耗费的分钟数,再加上失效选择器的处理和重新运行所耗时间,最后换算为每月小时数。所有示例数值均为假设,而非实测结果。不稳定测试成本计算器可根据您自己的数据计算。

  • 如何在不使用隧道的情况下测试 localhost?

    将 BASE_URL 指向 localhost 上的应用或私有预发布环境 URL. Nexus 引擎会在运行前启动应用,等待其响应,运行测试并在结束后停止应用,无需隧道,也无需暴露预发布环境 URL. 它可在 PC 上、Docker 中或通过 SSH 运行。 localhost 指南提供了详细说明。

  • Nexus StudioQA 由谁开发?

    Verdict System LLC 是一家在美国怀俄明州注册的软件公司。该公司开发、销售并支持按机器计价的 Nexus StudioQA,由自有团队提供技术支持。该公司与创意工作室 Nexus Studios 无关。关于我们页面提供公司详细信息。

  • Nexus StudioQA 会将我的测试数据发送到云端吗?

    不会。您的测试数据不会离开您的机器。Studio 唯一主动发起的连接用于许可证检查:激活时发送一次密钥,之后发送机器哈希值、随机数、令牌以及主机名、操作系统和 Studio 版本。测试名称、代码、结果、截图、视频和历史记录均保留在您的机器上。安全与隐私页面列出了所有连接。

  • Nexus StudioQA 会将我的测试锁定在其平台中吗?

    不会。Nexus Recorder、AI 编写器和 Test Adapter 生成的是标准的 Playwright、Selenium 或 pytest 文件,您的团队可以阅读、编辑并保留这些文件。Python 测试使用标准 pytest 运行,Playwright JavaScript 测试只需将导入指向 @playwright/test, 即可脱离 Studio 运行。API 测试使用 Studio 自有的格式,因此文档中说明了迁出方法。

  • Nexus StudioQA 如何收费?

    套餐按机器数量定价,所有套餐均包含全部功能。Individual 支持 1 台机器,Team 支持 3 台,Business 支持 10 台,Enterprise 需单独报价。不按用户数、测试次数或并行运行次数收费,免费试用无需信用卡。价格页面列出了所有价格。

  • Nexus StudioQA 是本地、云端还是混合部署?

    混合架构,本地优先。目前,测试在您掌控的机器上运行:您的电脑、Docker,或通过 SSH 连接的 Linux 服务器。Nexus Cloud 是可在每次运行时选择的可选托管运行环境,目前处于计划阶段:尚不可用,暂不销售,也无发布日期。隔离模式正在开发中,将阻止连接 Nexus Cloud、AI 服务提供商、工单系统和聊天服务。许可证检查和被测应用仍可连接网络。

  • 哪些情况下 Nexus StudioQA 不适合使用?

    如果您不使用 Windows, 需要 iPhone 真机、数百种浏览器和操作系统组合,或希望由他人托管测试运行,它就不适合。此外,它目前还不支持 SSO, 也没有 SOC 2 报告。对比页面提供了完整列表。

最后更新: · 所有问题

从现有功能开始

创建账户,在一台机器上试用。无需信用卡。个人版每月 $79,支持 1 台机器;团队版每月 $199,支持 3 台;商业版每月 $599,支持 10 台。所有套餐均包含全部功能。企业版另行报价。

发布优惠: 创始客户名额满额后, 于2026年12月31日前购买年度套餐, 首年可享发布折扣。

查看套餐