跳到索引

DeepEval

Confident AI

开源★ 代码生成第 28 名

产品状态: 尚未登记状态

本条目尚未登记生命周期复核。被目录收录不代表当前可用,选用前请向厂商确认。

尚未记录状态查看日期

Apache许可的Python大模型评估框架;Confident AI报告/追踪平台独立。 本条目尚未登记生命周期复核。被目录收录不代表当前可用,选用前请向厂商确认。

产品预览

deepeval.com
DeepEval 的产品预览

选型依据

官方资料研究

本次依据所列文档整理,没有实际使用产品、购买套餐,或进行质量、速度、可靠性测试。

适合考虑的需求

  • 能维护数据集并审查指标失败的Python团队

这些情况下应考虑其他方案

  • 把指标分数当合规证明
  • 将云额度套到免费本地代码

价格与使用条件

已有公开条款依据

Apache2框架代码无许可费,judge、计算及提供商可另收费。Confident Free列2席/1项目/每周5次运行,月trace 1GB、超出丢弃;Starter列$200/月、5GB/月后按摄入或保留$1/GB/月。税、ISO币种及账户费用待核;云限制不限制本地测试。

价格来源查看日:

价格或条款来源

代码、模型与服务许可范围

Apache2适用框架代码及通知/修改义务。Confident条款允许服务处理并授永久聚合数据许可;Customer Data训练须事先书面同意,与聚合/反馈不同。输入、生成测试数据及输出仍须各自权利;隐私留存按目的/法律,不是零留存,模型商另论。

既有评分的依据与限制

保留原4.5/5;原评分细表及实测依据未恢复,本轮文档研究未重评。

深度介绍

DeepEval用用例和指标评估应用回复、检索及代理行为。许多指标由大模型评判,分数依指标、数据和judge,不是安全、版权或通用品质认证。

Python框架可独立于Confident AI使用;登录后可启云报告/同步,在线trace及共享报告另有平台限制。框架PostHog遥测可关闭,文档事件不含测试结果,但可选云存储及模型提供商是不同数据路径。

资料来源

本篇的事实性陈述来自以下页面。日期是编辑最后一次打开该来源的日期,不是产品发生变更的日期。

优点 / 缺点

优点

  • 评估可接Python检查
  • 指标及云/本地边界有文档

缺点

  • 评判输出可能变化
  • 云存储及API另计费

适合谁用

01

维护版本化回归数据集

02

比较限定应用改动

编辑结论

先选代表用例与judge预算,再决定云报告。

核心功能

用例与指标
Pytest集成
可配置评判模型
独立云报告

标签

评估Python大模型

常见问题

DeepEval 目前还能使用吗?

本条目尚未登记生命周期复核。被目录收录不代表当前可用,选用前请向厂商确认。

DeepEval 是什么?

DeepEval 是由 Confident AI 开发的代码生成工具。Apache许可的Python大模型评估框架;Confident AI报告/追踪平台独立。

选择 DeepEval 前应核对哪些费用与条款?

Apache2框架代码无许可费,judge、计算及提供商可另收费。Confident Free列2席/1项目/每周5次运行,月trace 1GB、超出丢弃;Starter列$200/月、5GB/月后按摄入或保留$1/GB/月。税、ISO币种及账户费用待核;云限制不限制本地测试。

DeepEval 是开源的吗?

Apache2适用框架代码及通知/修改义务。Confident条款允许服务处理并授永久聚合数据许可;Customer Data训练须事先书面同意,与聚合/反馈不同。输入、生成测试数据及输出仍须各自权利;隐私留存按目的/法律,不是零留存,模型商另论。

DeepEval 有哪些最佳替代品?

值得关注的代码生成替代品包括 GitHub Copilot、Cursor、Replit Agent。你可以在我们的代码生成分类中浏览全部 76 个工具。

这个页面有帮助吗?

访问官方网站 →查看源码

基本信息

定价
免费增值

Apache2框架代码无许可费,judge、计算及提供商可另收费。Confident Free列2席/1项目/每周5次运行,月trace 1GB、超出丢弃;Starter列$200/月、5GB/月后按摄入或保留$1/GB/月。税、ISO币种及账户费用待核;云限制不限制本地测试。

编辑评分
★ 4.5 / 5 评分方式
平台
LibraryCloud
最近核验
尚未记录