
GitHub 收藏16.3K近 7 天 +60
代码最近更新2026 年 2 月 24 日
许可证开源 · Apache-2.0
要不要花钱免费
提供客观指标评估大模型输出,并能自动生成测试数据集来检验效果。适合开发大模型应用的技术人员。需要安装后通过命令行和写代码调用。
能做什么
- 用客观指标评估大模型输出质量
- 自动生成多样化测试数据集
- 专门评测按资料回答的准确度
- 结合线上真实数据持续改进效果
怎么开始
- 必须会写代码,在命令行中安装该软件包
- 配置好 OpenAI 的接口密钥环境变量
- 运行快速开始命令生成示例模版开始评测
选它,如果你……
- 你在做按资料回答的系统并想量化它的效果
- 你手头缺少现成的测试数据集需要自动生成
- 你想摆脱主观肉眼判断并用自动化指标跑分
别选,如果你……
- 你不会写代码且想要开箱即用的网页界面
怎么用
代码开源,可以免费下载使用。
多少钱、在哪买
免费使用。
综合评价
谨慎半年以上没更新
- 更新停更最近一次改代码是 259 天前;最近一次发版是 301 天前(v0.4.3)
- 问题处理差近 90 天新开 36 个问题,解决了 3 个;外部提交的修改合进 0 个,待处理 269 个
- 用的人多GitHub 收藏 1.6 万,近 7 天新增 60;240 人参与开发
- 用户口碑暂不计用户评价满 5 条后才算进来
数字取自 GitHub 的公开记录(2026/11/10), 用户评价来自本页口碑。自己核对:项目主页、问题、外部提交的修改、发版记录。
怎么评的
只看公开、能核对的数据,不打分数,只给四档结论,每一项的依据都写在旁边。
- 更新:近 90 天改了多少次代码、最近一次发版是哪天。7 天内有改动并且改得多或常发版,算「很活跃」;30 天内有改动算「活跃」;半年内算「放缓」;半年以上没动或者已经归档,算「停更」。
- 问题处理:近 90 天新开的问题解决了几成、一般几天解决、外部提交的修改积压了多少。解决八成以上、一般一周内解决、积压不比合进去的多,算「好」;解决不到一半算「差」;其余算「一般」。新问题不到 10 个的不评。
- 用的人:GitHub 收藏 5 万以上算很多,1 万以上算多,1 千以上算一般。旁边写近 7 天新增多少、多少人参与开发。
- 用户口碑:用户评价满 5 条才算进来(注册不满 7 天的账号不算);平均分在 2.5 分及以下,总评降一档。
- 总评四档:还在更新、问题处理好、用的人多 → 推荐;还在更新 → 不错;更新放缓或问题处理差 → 一般;半年以上没更新 → 谨慎。许可证有附加条件、商用受限的,单独提醒,不影响总评。
- 收费软件(ChatGPT、Cursor 这类)没有公开的问题记录,就看 App Store:最近一次更新在 30 天内算「活跃」,半年内算「放缓」,半年以上算「停更」;打分人数 10 万以上算很多,1 万以上算多,1 千以上算一般;评分 4 分以上算好,2.5 分及以下算差,打分不到 100 人不评。再加上用户评价。
收藏数能刷,所以只占一项;更新和问题处理很难刷。数据每天更新,超过两周没更新的不评。
最近更新和热度
- v0.4.3
新增基于 DSPy 的提示词优化与缓存,模型支持设置系统提示词
- v0.4.2
支持新版 Google GenAI,接入 AG-UI 评测,多项指标迁移新接口
- v0.4.1
提示词支持保存和加载,测试集生成器新增上下文参数
GitHub 收藏
16,277 次净增 +2802026/10/12—2026/11/102026/11/10 · 16,277 次
查看每日记录
| 日期 | GitHub 收藏(次) |
|---|---|
| 2026/10/12 | 15,997 |
| 2026/10/13 | 16,004 |
| 2026/10/14 | 16,009 |
| 2026/10/15 | 16,029 |
| 2026/10/16 | 16,037 |
| 2026/10/17 | 16,044 |
| 2026/10/18 | 16,049 |
| 2026/10/19 | 16,067 |
| 2026/10/20 | 16,082 |
| 2026/10/21 | 16,093 |
| 2026/10/22 | 16,113 |
| 2026/10/23 | 16,129 |
| 2026/10/24 | 16,135 |
| 2026/10/25 | 16,142 |
| 2026/10/26 | 16,150 |
| 2026/10/27 | 16,158 |
| 2026/10/28 | 16,166 |
| 2026/10/29 | 16,175 |
| 2026/10/30 | 16,185 |
| 2026/10/31 | 16,190 |
| 2026/11/01 | 16,196 |
| 2026/11/02 | 16,209 |
| 2026/11/03 | 16,217 |
| 2026/11/04 | 16,231 |
| 2026/11/05 | 16,242 |
| 2026/11/06 | 16,247 |
| 2026/11/07 | 16,254 |
| 2026/11/08 | 16,259 |
| 2026/11/09 | 16,261 |
| 2026/11/10 | 16,277 |
能替代它的
标出的是和 Ragas 不一样的地方
用户口碑
还没有人点评。用过的话,写下第一条真实体验,帮后来的人少踩坑。
数据来源:GitHub,每天更新,更新时间 2026 年 11 月 10 日。 信息有误?告诉我们。
发布软件评论