1. 上线任务#
任务创建者在 我创建的 tab下,找到待上线任务,点击 是否上线 按钮,将任务上线。

2. 标注员身份任务作业#
人工评测任务页面,切换至 我评测的 tab, 可以查看以标注员身份需要作业的评测任务。

点击待评测的任务名称,点击右上角 开始答题 按钮,进入到评测页面。

针对多模型或者单模型模式的模型效果进行评测标注。专业版模式下,可以评测GSB分数,Diff 问题类型,各个模型的有用性,真实性,安全性,自身文体类型等内容,点击右上角 提交 按钮,提交本题并且领取下一道题。
专业版多模型评测页面

专业版单模型评测页面

3. 审核员身份任务作业#
人工评测任务页面,切换至 我审核的 tab, 可以查看以审核员身份需要作业的评测任务。审核标注员标注的每一道题。

点击待评测的任务名称,点击右上角 开始答题 按钮,进入到评测页面。

评测页面与标注员的评测页面相同,可以在 审核备注 处填写审核意见。可以直接修改标注员标注的评测结果,也可以点击右上角的 驳回 按钮,将此题驳回给标注员进行重新标注。可以点击右上角的 通过 按钮,通过此题,同时自动领取下一道题。

4. 质检员身份任务作业#
人工评测任务页面,切换至 我质检的 tab, 可以查看以质检员身份需要作业的评测任务。

点击待评测的任务名称,点击 质检抽检 tab。

点击左上角 创建抽检包 按钮。

可以选择优先抽检的模式,并且自定义抽检题目数量,点击 确定 按钮创建抽检包。

在质检抽检列表页面,点击抽检包的 开始抽检 按钮,点击某一道试题的 抽检 按钮进行质检作业。作业页面与评测标注页面相同,可以填写 质检备注 内容对质检评论进行备注

所有试题抽检完成后,点击抽检包的终止按钮,终止质检状态。

点击 批量操作 按钮,选择是否将任务推送至验收状态,或者驳回所有试题。

5. 验收员身份作业任务#
人工评测任务页面,切换至 我验收的 tab, 可以查看以验收员身份需要作业的评测任务

点击待评测的任务名称,点击 质检抽检 tab

点击左上角 创建抽检包 按钮,创建一个抽检包

可以选择优先抽检的模式,并且自定义抽检题目数量。

在质检抽检列表页面,点击抽检包的 开始抽检 按钮,进行质检作业。作业页面与评测标注页面相同。
在 我验收的 tab, 设置任务的合格状态或者不合格状态。
