Список тестов

API

Проверка качества API

Выполняет этот вызов с вашими адресом API, ключом и моделью. Можно проверить, устанавливается ли соединение, полон ли ответ и возвращаются ли вызовы инструментов и структурированный вывод в ожидаемом виде.

Запустить тест

Пользовательский тест v1
Модель

По умолчанию: все проверки

Выбрать проверки
Проверки

Приватный отчёт; в рейтинги не входит.

Ключи не попадают в отчёты

Перед началом

Я подтверждаю, что мне разрешено тестировать этот адрес API и ключ.

Как проверяется

Вы выбираете проверки. Folkbench использует ваши адрес API, ключ и модель, отправляет вызовы с нашего сервера, а затем сравнивает то, что действительно вернулось. Результат остаётся у вас и не влияет на рейтинг.

  1. Подключение

    один короткий вызов, чтобы проверить соединение и формат ответа.

  2. Соответствие модели

    несколько вызовов, чтобы проверить, стабильны ли идентичность модели, потоковый ответ и повторный запрос.

  3. Конфиденциальность

    нет ли в ответе того, чего там быть не должно.

  4. Вызов инструментов

    соблюдает ли API формат вызова инструментов.

  5. JSON

    возвращается ли согласованная структура.

  6. Чтение PDF

    может ли модель прочитать файл и ответить.

  7. Длинный контекст

    более длинный ввод, чтобы проверить, остаётся ли ответ полным.

  8. Проверка Juice

    сообщает ли о нём сам текст. Отсутствие ответа или отказ означают лишь, что в этом запуске нет доказательств по этому пункту.

Статьи по теме