評価一覧
API
API 品質チェック
ご自身のエンドポイント、API キー、モデルで今回の呼び出しを実行します。接続できるか、応答が完全か、ツール呼び出しや構造化出力が期待どおりの形式で返ってくるかを確認できます。
テストを開始
ユーザーテスト v1テストの方法
チェック項目はご自身で選びます。Folkbench は入力されたエンドポイント、API キー、モデルを使い、サーバーから項目ごとに呼び出しを送信して、実際に返ってきた内容を照合します。結果はご自身にのみ表示され、ランキングには反映されません。
接続性
短い呼び出しを 1 回送り、接続できるか、応答が想定どおりの形式で返るかを確認します。
モデル一致度
複数回呼び出し、モデルの識別情報、ストリーミング応答、繰り返しのリクエストが安定しているかを確認します。
プライバシー
応答に含まれるべきでない内容が含まれていないかを確認します。
ツール呼び出し
エンドポイントがツール呼び出しの形式に従うかを確認します。
JSON
取り決めた構造で返せるかを確認します。
PDF 読み取り
ファイルを読み込んで回答できるかを確認します。
長いコンテキスト
長めの入力を与え、応答が完全なままかを確認します。
Juice の検証
テキスト内で自己申告しているかを確認します。回答がない、または拒否された場合は、今回その項目のエビデンスが得られなかったことを示すだけです。
