下载地址一 - 51Testing软件测试网

51Testing 软 件 测 试 网
你 仔 细 地 计 划 了 你 的 测 试 , 那 么 你 应 该 确 定 哪哪 些 数 据 对 你 来来 说 是 重 要 的 。
首 先 , 你 应 该 检 查查 你 的 数 据 在 统 计 上 是 有 效 的 。 为 此 , 执 行 有 关 你 的 测 试 数 据 的 一 个 Performance
报 告告 和和 Response vs. Time 报 告告 。
注 意 事 项 : 在 suite 成 功 执 行 的 后 期 ,TestManager 会 自 动 地 执 行 Performance 和和 Response vs. Time
报 告告 。
Performance 报 告告 包包 含 了 两 列 内 容 : 平 均 数 和和 标标 准 偏 差 。 如 果果 平 均 数 少 于 3 次 的 标标 准 偏 差 , 那 么 你
的 数 据 对 于 有 意 义 的 结 果果 而 言 可 能 就 过 于 分 散 了 。
Response vs. Time 图 展 现 了 相 对 于 执 行 经 过 时 间 的 响响 应 时 间 。 该 数 据 应 该 是 在 达 到到 一 个 稳 恒 态 的
性 能 下 取 得 , 而 不 是 在 更 好 或 更 糟 的 性 能 条条 件 下 步 进 地 获 得 。 如 果果 该 响响 应 时 间 是 在 更 好 的 性 能
下 步 进 地 获 得 的 , 那 么 你 可 能 就 要 将 登 陆 时 间 也 包包 含 在 你 的 测 试 结 果果 中 , 而 不 是 去 衡 量 一 个 稳
定 的 工 作 量 。 或 者 在 你 数 据 库 中 访 问 这 些 数 据 的 总 量 可 能 少 于 现 实 的 数 据 , 结 果果 是 所 有 的 访 问
在 缓 存 中 被 平 衡 。
在 你 确 认 了 你 的 实 例 是 有 效 的 之 后 , 开 始 分 析析 你 的 测 试 结 果果 。 当 你 分 析析 结 果果 时 , 使 用 一 个 多 层
次 接 近 (approach)。 例 如 , 如 果果 你 驾 车 从 一 个 城 市 到到 另 外 一 个 , 你 希 望 使 用 一 张 美 国 地 图 来来
计 划 一 个 总 的 行 车 路 线 , 并 且 需 要 一 张 更 详 细 的 城 市 地 图 来来 获 得 你 的 目 的 地 。
同 样 地 , 在 你 分 析析 你 的 测 试 结 果果 时 , 你 应 当 首 先 在 一 个 宏 观 层 上 开 始 , 然 后 在 移 动 到到 一 个 更 为
细 节 的 层 次 上 。
下 一 节 总 结 了 你 可 以 使 用 的 来来 分 析析 测 试 结 果果 的 这 些 不 同 的 细 节 层 次 。 有 关 性 能 测 试 报 告告 的 更 多
信 息 , 参 阅 291 页 上 Reporting Performance Testing Results 的 内 容 。
多 重 执 行 的 结 果果 比 较 (Comparing Results of Multiple Runs)
分 析析 的 第 一 层 包包 含 对 单 个 suite 执 行 结 果果 的 图 形 摘 要 信 息 的 评 估 , 然 后 比 较 通 过 多 重 执 行 的 结 果果 。
例 如 , 检 查查 针 对 单 个 虚 拟 测 试 者 或 在 单 个 的 suite 执 行 期 间 进 行 业 务 处 理 的 响响 应 时 间 分 布 。 然 后
比 较 平 均 响响 应 时 间 , 这 些 响响 应 时 间 通 过 多 重 执 行 , 且 具 有 不 同 数 量 的 虚 拟 测 试 者 。
第 一 层 的 分 析析 让 你 确 知 你 的 性 能 目 标标 是 否 已 基 本本 满 足 。 它 帮 助 你 确 认 在 数 据 中 的 趋 向 , 并 强 调
在 什 么 地 方 会 出 现 性 能 问 题 — 例 如 , 性 能 可 能 在 250 个 虚 拟 测 试 者 时 有 相 当 程 度 的 退 化化 。
要 得 到到 该 类 型 的 分 析析 结 果果 , 执 行 Performance 和和 Compare Performance 报 告告 。
具 体 请 求 和和 响响 应 的 比 较 (Comparing Specific Requests and Responses)
分 析析 的 第 二 层 包包 含 要 检 查查 的 统 计 概 要 , 以 及 针 对 具 体 虚 拟 测 试 者 的 请 求 和和 系 统 响响 应 的 实 际 数 据 。
概 要 统 计 包包 含 了 响响 应 时 间 的 标标 准 偏 差 和和 百 分 比 分 布 , 它 表 明 通 过 单 个 的 虚 拟 测 试 者 系 统 的 响响 应
如 何 变 化化 。