MoveBench movebench
MoveBench · Open Evaluation

加入 MoveBench™ 评估计划,
让您的模型在 运动科学 领域更进一步。

80公开题目
50开放题 OQ · rubric 评分
30选择题 MCQ · 自动判分
3核心评测场景

公开评测 · Release 1:这是论文 809 题评测集的公开子集。论文完整题库成绩与本页公开版成绩分别报告。

开源数据集

Open Dataset

公开题目、稳定 ID、领域与题型。开放题附 rubric 评分细则与参考答案,选择题附标准答案;Judge Prompt 与评分流程由维护端私有保存。

PG · Plan Generation26
训练方案生成

结合用户画像与目标,生成科学、可执行、安全的训练与课程安排。

DA · Data Analysis29
运动数据解读

基于运动记录与身体数据,评估强度、负荷与风险并给出进阶建议。

QA · Question Answering25
专业知识问答

回答运动健康领域的专业问题,识别误区与红线、守住执业边界。

开放题 OQ 50 选择题 MCQ 30(单选 11 · 多选 19) rubric 评分细则 464 条

数据许可 CC BY 4.0:允许商业使用,需署名 KeepaceAI Team。评测代码采用 MIT 许可。

参与评测

Participate in MoveBench

  1. 生成模型答案

    下载 questions.json,用本地模型或 API 完成全部 80 题。开放题输入仅使用问题,选择题附带选项并要求输出选项字母。

  2. 提交完整答案

    按提交模板填写答案、精确模型版本和生成设置,通过 GitHub Pull Request 提交至 submissions/。请勿在公开文件中填写 API Key。

  3. 评分审核后上榜

    维护者使用私有评分流程评测并审核,再更新公开版榜单。当前采用维护者审核流程,提交后不会即时自动评分。

命令较长,可左右滑动
git clone https://github.com/SatoSakula/MoveBench.git
cd MoveBench
python3 tools/validate.py
python3 tools/run_student.py --model your-model \
  --base-url https://api.example.com/v1 --output predictions.json

运行前在本机配置 STUDENT_API_KEY。脚本支持 Python 3.10+ 和 OpenAI-compatible Chat Completions 接口。

公开版评测榜单

AI Leaderboard / Release 1

仅展示在这 80 题上完成评分并经维护者审核的结果。分数以 0–1 显示,完整覆盖率为上榜条件。

正在读取本版本榜单…

本版本公开了 rubric 与参考答案,公开成绩可能受数据污染影响;完整评分证据私有保存。成绩不构成医疗安全或真实训练效果认证。