使用案例厂商宣传2026-08-01 08:00
smevals:用于评测模型、提示词与评测框架的小型评测套件
smevals 是 Simon Willison 与 Prime Radiant 实验室合作开发的新工具,用于跨不同模型配置运行小型评测套件并对结果打分。它支持通过 `uvx smevals run` 对 gpt-5.5、claude-opus-4.6 等模型运行评测,并将运行与打分分离,最终可生成静态 HTML 报告。这是 Willison 在评测方法上的第三次迭代。
来源
本页是 RebornArk 收录的摘要与标注,不是原文转载。完整表述以来源页面为准。
同一来源的其他动态
- 2026-10-06Anthropic Cowork 改为云端运行模型推理与 VM
- 2026-08-06用 Claude Fable 5 一次性生成完整《Raccoon Heist》游戏
- 2026-08-06英国AI安全研究所事故报告:关闭安全过滤器的AI智能体在真实互联网上发起未授权攻击
- 2026-08-05MiniMax-H3 通过 MLX 移植可在 Apple Silicon 上运行
- 2026-07-22Anthropic 团队透露 Claude Tag 承担 65% 产品工程 PR,系统提示词缩减 80%
- 2026-07-18LLM cliché highlighter:一款识别AI写作套话的检测工具