Promptfoo
产品状态: 尚未登记状态
本条目尚未登记生命周期复核。被目录收录不代表当前可用，选用前请向厂商确认。
尚未记录状态查看日期
用于配置化 LLM 评测与红队测试的开源命令行工具和库，支持 CI 集成，另有商业平台方案。 本条目尚未登记生命周期复核。被目录收录不代表当前可用，选用前请向厂商确认。
产品预览
选型依据
官方资料研究
本次依据所列文档整理，没有实际使用产品、购买套餐，或进行质量、速度、可靠性测试。
适合考虑的需求
- 能在 CI 中维护测试用例与断言的工程团队
- 使用自定验收标准评估获授权目标的安全团队
这些情况下应考虑其他方案
- 希望一次扫描就能证明安全或合规的团队
- 需要托管权限管理和支持、却不准备评估商业方案的采购方
价格与使用条件
已有公开条款依据
价格页列 Community 为免费，但红队用量有限；Enterprise 与 On-Premise 需定制报价。软件免费不代表所有模型/API 调用、自托管基础设施及测试维护也免费。未确认商业金额、账期、税费、地区与最低承诺，应向销售确认。
价格来源查看日:
价格或条款来源代码、模型与服务许可范围
已发布 Promptfoo 软件采用 MIT：保留版权与许可声明即可商用、修改及再分发，且不提供担保。该许可不涵盖所有托管 Enterprise 功能、模型/API、测试目标或网站素材。网站条款另管站内内容、贡献和反馈，其中专有网站下载限制不能套用于 MIT 软件。Enterprise/本地部署订单与数据条款须另核。默认遥测和可选远程红队/模拟用户生成属于不同数据路径；发送提示词或数据集前，应取得目标测试授权并审查提供商条款。
既有评分的依据与限制
保留原有 4.6/5 编辑分，未重新计算。本轮未找到原始评分工作表，也未执行评测；这些文档不能验证该数字或证明相对竞品的性能。它是待单独复核的历史编辑意见。
深度介绍
Promptfoo 提供用于评测和红队测试 LLM 应用的开源命令行工具与库。文档介绍了配置驱动的测试用例、断言、模型提供方对比及 CI 集成。仓库采用 MIT 许可，允许在相应条件下使用和修改已发布软件，但这不代表商业平台的每项功能都属于开源部分。公司关于页写明 Promptfoo 现已是 OpenAI 的一部分。
对开发团队来说，关键是由谁维护用例、判断失败。Promptfoo 可以让检查重复执行，团队仍需选择有代表性的输入、有用的断言及可接受的失败阈值。一次通过只说明已配置用例的结果，不能证明应用能抵御所有攻击或对未来请求始终准确。在本地运行命令行也不等于远程模型请求留在本地：应检查所选提供方及会发送给它的数据。
价格页区分 Community、Enterprise 和 On-Premise。Community 包含本地评测及部分红队用量；商业方案增加团队权限、托管部署和支持等控制。选档前应比较必需的控制和探测用量限制，并单独预算模型/API 调用、运行基础设施与用例维护。本目录只阅读文档，没有配置评测或扫描目标，因此不声称检出率、误报率、运行速度或仪表盘优于竞品。
资料来源
本篇的事实性陈述来自以下页面。日期是编辑最后一次打开该来源的日期，不是产品发生变更的日期。
优点 / 缺点
优点
- 通过配置组织评测和提供方对比
- 有 CI 集成及失败阈值文档
- MIT 许可的命令行工具与库
- 提供商业云端与本地部署选项
缺点
- 测试用例与判定标准需持续维护
- 外部模型可能增加费用及数据传输考量
- 高级平台控制与支持取决于商业方案
适合谁用
用持续维护的回归用例检查提示词变更
在相同断言下比较模型输出
调查获授权 LLM 应用的安全失败案例
编辑结论
能自行维护用例与验收标准时可考虑 Promptfoo；按实际控制需求选择商业档位，并单独预算模型用量。
核心功能
标签
Promptfoo 与替代品对比
常见问题
Promptfoo 目前还能使用吗？
本条目尚未登记生命周期复核。被目录收录不代表当前可用，选用前请向厂商确认。
Promptfoo 是什么？
Promptfoo 是由 Promptfoo 开发的代码生成工具。用于配置化 LLM 评测与红队测试的开源命令行工具和库，支持 CI 集成，另有商业平台方案。
选择 Promptfoo 前应核对哪些费用与条款？
价格页列 Community 为免费，但红队用量有限；Enterprise 与 On-Premise 需定制报价。软件免费不代表所有模型/API 调用、自托管基础设施及测试维护也免费。未确认商业金额、账期、税费、地区与最低承诺，应向销售确认。
Promptfoo 是开源的吗？
已发布 Promptfoo 软件采用 MIT：保留版权与许可声明即可商用、修改及再分发，且不提供担保。该许可不涵盖所有托管 Enterprise 功能、模型/API、测试目标或网站素材。网站条款另管站内内容、贡献和反馈，其中专有网站下载限制不能套用于 MIT 软件。Enterprise/本地部署订单与数据条款须另核。默认遥测和可选远程红队/模拟用户生成属于不同数据路径；发送提示词或数据集前，应取得目标测试授权并审查提供商条款。
Promptfoo 有哪些最佳替代品？
值得关注的代码生成替代品包括 GitHub Copilot、Cursor、Replit Agent。你可以在我们的代码生成分类中浏览全部 76 个工具。
这个页面有帮助吗？
