当 QA 带着截图通过某项工作后,评审委员会会请一组模型对它的界面打分。每个成员给出 10 分制下的分数,并指出会修复什么。最低分决定结果。若低于目标值,该工作会退回给开发者,并附带这些发现作为必须完成的修复项;QA 会再次检查,评审委员会也会再次打分。
评审委员会在你启用之前处于关闭状态。一旦对你的组织可用,它就会出现在 Quality Control 中。
启用它
打开Quality Control,然后评审委员会,位于 QA 组中。
- 在组织默认值下,它适用于遵循默认值的每个项目。
- 一个项目可以拥有自己的设置。使用默认值会把组织的设置带回来。
设置
| 设置 | 含义 | 默认值 |
|---|---|---|
| 目标值 | 为使工作无需修复即可完成,任意成员可能给出的最低分数为:10 分中的 6 到 9 分。 | 10 分中的 8 分 |
| 轮次 | 评审委员会对工作打分的次数,包含第一次。 | 3 |
CoRoid 的评审委员会使用来自不同系列的模型,这样单个模型的盲区就不会单独决定结果。
一轮
- 成员看到的内容。QA 为该工作发布的截图,每张都带有页面、状态和屏幕尺寸。成员看不到代码。
- 每个成员给出的内容。10 分制的分数,以及发现项:哪里有问题、问题在哪里、哪张截图显示了该问题。
- 结果。达到了目标值,或者工作低于目标值。如果某个成员无法对工作打分,例如因为其模型不可用,则该轮次记为未评估,工作也不会被搁置。
从第二轮开始,成员还会看到前一轮的截图,这样就能判断修复是否让情况变好了。
轮次结束时
出现以下任一情况时,轮次即结束:
- 最低分达到目标值;
- 所有轮次都用完了;
- 没有成员提出需要修复的发现项;
- 当 QA 再次检查时,修复并未解决任何发现项;
- 在工作限制范围内,已没有空间再进行一次修复。
如果修复导致分数下降,CoRoid 会回到成员打分更高的版本一次,然后轮次在此结束。
你看到的内容
- 任务的线程。每轮都有一行。点击该行可查看成员的分数、他们的发现项以及他们看到的截图,旁边还有前一轮的截图。
- 质量。任务的问题列表会显示评审委员会的发现项,无论它们是未解决还是已修复。
- pull request。一个评审委员会部分会说明结果、每轮的分数,以及哪些已修复、哪些仍未解决。
- 合并计划。合并授权绝不会合并结束时分低于目标值的工作。由人来决定。
成本
每轮都会要求每个成员带着截图对工作打分,因此评审委员会会对其评分的每项工作增加模型使用量。只有当工作仍低于目标值时,轮次越多才意味着模型使用量越多。
设置导出与导入
当你导出和导入组织设置时,评审委员会的设置会随交付策略一起迁移。在目标端支持评审委员会的地方,这些设置会生效。