验证器如何被绕过?查看我们的对抗测试方法 →

草稿 · 待发布

一条专家轨迹,应该留下什么

保留操作、判断理由、纠错,以及每个决定背后的证据。

把返工也保留下来

专业人员并不总是一次做对。有效的轨迹应当保留失败调用、修正后的假设,以及主动撤销的操作,而不应悄悄覆盖最初的尝试。

在关键决定处记录理由

当一步操作改变了判断或任务状态时,记录简短的依据。结束后,再请参与者说明如何确认完成、哪里最容易失败,以及什么情况会造成表面成功。

判断理由应当与工具参数分开保存:参数描述做了什么,理由解释为何这样做。

发布前进行专业复核

机器检查用于验证结构与约束,专业复核者还要判断理由是否充分、证据是否可靠,以及最后的沟通是否符合领域要求。

本文为采集协议草稿,不代表已经形成正式专家数据集。