软件详情

Lm Evaluation Harness综合评价:一般

EleutherAI · 评测与监控

语言模型评测工具,能按学术基准跑分并对比各家模型表现。

免费开源 · MIT
GitHub 收藏14.4K近 7 天 +51
代码最近更新2026 年 11 月 4 日
许可证开源 · MIT
要不要花钱免费
还没有人点评,来写第一条看口碑 ↓

主要用于在大量学术标准测试集上给大模型打分和比对能力。适合大模型开发者和研究人员。通过命令行安装配置或写代码调用运行。

用起来难吗要写代码在哪用命令行能用的模型OpenAI GPTClaudeLlama能用自己电脑上的模型能填中转站的地址和 Key

能做什么

  • 提供超 60 个学术评测基准
  • 评测本地及开源模型
  • 接入商业模型接口测试
  • 支持自定义提示词与指标
  • 评测微调后的模型权重

怎么开始

  1. 需要会写代码并在电脑终端中安装基础包和对应后端
  2. 准备好要测的模型权重文件或填写商业模型接口密钥
  3. 运行评测命令并指定想要测试的任务名称查看分数

选它,如果你……

  • 你想用业内通用的学术基准测试自己训练或微调的模型
  • 你需要给主流开源大模型或商业接口跑标准化测试
  • 你想自定义测试任务、提示词或评分指标来做研究

别选,如果你……

  • 你不会使用命令行或写代码
  • 你只想直接找个现成聊天软件对话

怎么用

代码开源,可以免费下载使用。

多少钱、在哪买

免费使用。

用户口碑

还没有人点评。用过的话,写下第一条真实体验,帮后来的人少踩坑。

发布软件评论

评分
选填
编辑器加载中…

数据来源:GitHub,每天更新,更新时间 2026 年 11 月 10 日。 信息有误?告诉我们。

Lm Evaluation Harness:是什么、要不要花钱、怎么用 | 模真真