Команда инженеров, математиков и когнитивных компьютерных учёных под руководством Кембриджского университета разработала открытую оценочную платформу под названием «ChekMate».
Эта платформа, работающая на основе искусственного интеллекта, позволяет пользователям взаимодействовать с большими языковыми моделями (LLM) и оценивать их работу.
Исследовательская группа изучила, насколько LLM помогают в решении задач, а также какие чат-боты большинство пользователей используют для необходимых целей и связь между ними.
Хотя команда протестировала «ChekMate» на математических задачах, они отмечают, что эту платформу можно адаптировать для широкого круга применений.
Подготовила Саидова Бахора.
