Яндекс представил тест для оценки логического мышления нейросетей

Новая методика, предложенная Яндексом, призвана выявить, насколько хорошо ИИ-модели умеют логически рассуждать, анализировать информацию и делать выводы. В отличие от традиционных тестов, которые часто проверяют лишь способность к запоминанию и воспроизведению фактов, разработка Яндекса фокусируется на умении нейросетей решать нестандартные задачи, требующие глубокого понимания контекста и построения логических цепочек.

Тест представляет собой адаптированные версии известных игр «Данетки» и «Поле чудес». В «Данетках» нейросети должны восстановить общую картину по серии подсказок, задавая уточняющие вопросы и исключая неверные варианты. «Поле чудес» проверяет способность модели угадывать скрытые слова, используя ограниченное количество информации и ассоциативное мышление. Это позволяет получить более полное представление об их «интеллектуальном» потенциале.