PromptLayer

PromptLayer はプロンプトを、置き場所を必要とする成果物として扱います。版管理するレジストリ、アプリケーションを書かない人でも変更できる視覚エディタ、変更を出す前にデータセットで走らせる評価、そして本番で起きたことを原因となったプロンプト版へ結び戻すトレースです。

プロンプトをコードから分ける理由は、技術であると同時に組織の話です。プロンプトの文面がリポジトリにあると、文言を変えるたびにデプロイになり、反復のたびにエンジニアを借りることになります。その結果、チームは本来より少なく、大きく、危険なプロンプト変更を出すようになります。文面を版管理されたレジストリへ移せば、領域の専門家が自分で反復でき、変更は利用者に届く前に重要なケースで試せます。版とトレースの紐づけはもう半分です。それがなければ本番の品質後退は謎のままで、あれば「どの変更が原因か」という答えられる問いになります。