Чему опыт ИИ-исполнитель учит приёмку
Оценивайте полноту и принятые результаты, а не убедительность отчёта.
Результату нужен эталон
В извлечении исполнитель может вернуть правдоподобный JSON с пропущенными элементами. Оценивайте полноту, ссылки и лишние добавления по заранее заданному эталону. Дешёвый ответ дорожает, если не учитывать обзор и повторы.
Имя модели не является вердиктом
Записывайте запрошенный маршрут, наблюдаемый ответ, попытки и учёт. Оборванный ответ остаётся неполным. Ищите в рекламных черновиках выдуманные сроки, поддержку и скорость: предложение исполнителя не является обещанием продукта.