OpenRouter推出Ori Eval自动化模型评估工具

该工具通过扫描代码库并在实际任务中测试候选模型，支持按性能、速度或成本定制评估，并集成GitHub Actions实现自动化回归检测。

据 Woofun AI 消息，OpenRouter 发布了 Ori Eval 工具，旨在协助开发者为 AI 应用筛选最佳模型。该工具可扫描代码库定位模型调用点，并在项目实际任务中运行多候选模型测试，允许开发者根据性能、速度或成本优先级进行配置。评估过程锁定测试框架与模型配置以确保结果可比性，除答案质量外，还检查智能体工具调用的准确性。

此外，Ori Eval 支持基于自然语言描述生成漏洞复现测试用例，并与 GitHub Actions 集成，自动检测模型、提示词或代码变更后的问题回归。