インデックスへスキップ

製品の状態: 状態未登録

この項目にはライフサイクルの確認記録がありません。掲載は現在の利用可否を保証しません。利用前に提供元へ確認してください。

状態の確認日は未登録

企業向け LLM evaluation。自分の data・rule・judge LLM で model と agent を評価。 この項目にはライフサイクルの確認記録がありません。掲載は現在の利用可否を保証しません。利用前に提供元へ確認してください。

プロダクトプレビュー

www.patronus.ai
Patronus AI のプレビュー

詳細レビュー

Patronus AI は売るものを変えました。頁は今や、最先端の AI 研究所のために訓練用のデータ、課題、模擬の環境を作る研究室として自らを示しており、向く相手は自社のアプリを評価するチームではなく、中間の訓練や強化学習に取り組むチームです。仕事は課題・環境・研究の三つに分けられ、世界の模型化、変わる環境での長期の記憶、情報が欠けたままの複数手番の探索、エージェントの流れの中の誤りの特定、実在企業の書類に対する財務の推論といった基準の論文が公開されています。

これが向く買い手はごく少数です。専門家の裏づけある課題、採点の基準、訓練用の模擬アプリを必要とする最先端の研究所です。以前この項目が説明していた読み手、つまり自分の指示文と出力の評価器を求めるアプリのチームには、ほとんど向きません。今の料金の頁は、買える商品を載せていないからです。会社は最先端の研究所へ訓練用のデータを提供すると述べ、範囲と価格の相談のために連絡するよう求めています。頁には別に「保管された料金の頁」への繋がりがあり、これは売り続けている商品ではなく、取り下げた製品の並びの形です。言語モデルの試験やエージェントの信頼性についての手引きは今も公開されており、それはこの会社が以前何をしていたかの証拠であって、今何を提供しているかの証拠ではありません。

未確認:以前の評価の製品が今も使えるのか、どの程度残るのかは分かりませんでした。取得時にアプリの下位住所は HTTP 400 を返し、説明文書の下位住所は HTTP 401 を返しました。口座も開いていないため、以前の基盤が今も動いているかは不明です。基準の結果、顧客の数、研究の主張は、いずれも会社が自らの頁に載せた材料です。課題も環境も評価も使っていないため、出力の質は試していません。

この項目には内容の出典が登録されていません。掲載や既存スコアは、主張が独立して検証されたことを意味しません。

長所 / 短所

長所

  • domain 毎に調整した judge LLM
  • copyright detection を内蔵
  • CI 向け regression suite
  • 企業 compliance 姿勢

短所

  • 企業価格の tier gate
  • community は Promptfoo より小さめ
  • setup には domain 知識が要る

こんな人におすすめ

01

企業 LLM 品質 gate

02

AI 出力の copyright compliance

03

agent 挙動の regression test

04

finance・legal AI の evaluation

総評

この項目が説明していた評価の基盤は、もう会社が売っているものではありません。今は最先端の研究所向けに訓練の課題と模擬の環境を作り、問い合わせ対応のみです。

主な機能

custom judge model
幻覚と bias 検出
copyright と compliance check
regression test suite
フリーミアム

タグ

evaluation企業保安

よくある質問

Patronus AI は現在利用できますか?

この項目にはライフサイクルの確認記録がありません。掲載は現在の利用可否を保証しません。利用前に提供元へ確認してください。

Patronus AI とは?

Patronus AI は Patronus AI が開発したAIプラットフォームツールです。2023 年に発表され、開発元の所在地はアメリカ・サンフランシスコです。企業向け LLM evaluation。自分の data・rule・judge LLM で model と agent を評価。

Patronus AI は無料ですか?

Patronus AI はフリーミアムモデルを採用しています。無料プランが利用でき、有料プランで利用量と高度な機能が解放されます。

Patronus AI はオープンソースですか?

いいえ——Patronus AI はプロプライエタリ(専有)ソフトウェアです。

Patronus AI のおすすめの代替ツールは?

注目のAIプラットフォーム代替ツールには Hugging Face、Replicate、Ollama などがあります。カテゴリーページで全 138 件のツールをご覧ください。

このページは役に立ちましたか?

公式サイトを見る →

基本情報

料金
フリーミアム
編集スコア
★ 4.5 / 5 評価方法
プラットフォーム
APIWebSDK
公開年
2023
本社
アメリカ・サンフランシスコ
最終検証日
未記録