模型评测框架 · 四段图解
题库、执行、判分、聚合,一张横向四段式模型评测框架图。
10224 views
画一张 16:7 宽横版评测框架图,流程为题库、执行、判分、聚合。题库标题目来源、题型分类、难度分层、每题元信息类型;执行标被测模型接口、并发调度、重试超时、原始输出留存;判分含规则判分与模型判分并行路径,结果进一致性核验框,不一致样本虚线连人工仲裁;聚合标按维度汇总、按难度分层汇总、最终榜单。每区标区名;原始输出留档,判分可重跑,留存框与判分区虚线相连。 白底,各区铺淡底色,区名带小写字母序号。节点均为圆角矩形;输入原始数据、中间产物、处理模块、动作校验各用同色。实线示区内数据流,虚线示跨区传递。平面无投影渐变;英文标签,关键模块加粗,文字密准,画面只留结构标签,署名留空。
画一张 16:7 宽横版评测框架图,流程为题库、执行、判分、聚合。题库标题目来源、题型分类、难度分层、每题元信息类型;执行标被测模型接口、并发调度、重试超时、原始输出留存;判分含规则判分与模型判分并行路径,结果进一致性核验框,不一致样本虚线连人工仲裁;聚合标按维度汇总、按难度分层汇总、最终榜单。每区标区名;原始输出留档,判分可重跑,留存框与判分区虚线相连。 白底,各区铺淡底色,区名带小写字母序号。节点均为圆角矩形;输入原始数据、中间产物、处理模块、动作校验各用同色。实线示区内数据流,虚线示跨区传递。平面无投影渐变;英文标签,关键模块加粗,文字密准,画面只留结构标签,署名留空。
画一张 16:7 宽横版评测框架图,流程为题库、执行、判分、聚合。题库标题目来源、题型分类、难度分层、每题元信息类型;执行标被测模型接口、并发调度、重试超时、原始输出留存;判分含规则判分与模型判分并行路径,结果进一致性核验框,不一致样本虚线连人工仲裁;聚合标按维度汇总、按难度分层汇总、最终榜单。每区标区名;原始输出留档,判分可重跑,留存框与判分区虚线相连。 白底,各区铺淡底色,区名带小写字母序号。节点均为圆角矩形;输入原始数据、中间产物、处理模块、动作校验各用同色。实线示区内数据流,虚线示跨区传递。平面无投影渐变;英文标签,关键模块加粗,文字密准,画面只留结构标签,署名留空。
画一张 16:7 宽横版评测框架图,流程为题库、执行、判分、聚合。题库标题目来源、题型分类、难度分层、每题元信息类型;执行标被测模型接口、并发调度、重试超时、原始输出留存;判分含规则判分与模型判分并行路径,结果进一致性核验框,不一致样本虚线连人工仲裁;聚合标按维度汇总、按难度分层汇总、最终榜单。每区标区名;原始输出留档,判分可重跑,留存框与判分区虚线相连。 白底,各区铺淡底色,区名带小写字母序号。节点均为圆角矩形;输入原始数据、中间产物、处理模块、动作校验各用同色。实线示区内数据流,虚线示跨区传递。平面无投影渐变;英文标签,关键模块加粗,文字密准,画面只留结构标签,署名留空。