OpenAI обучила языковую модель решать математические задачки

Специалисты организации OpenAI обучили систему искусственного интеллекта решать несложные математические задачки для начальной школы, условия которых записаны в текстовом формате. We've trained a system to answer grade-school math problems with double the accuracy of a fine-tuned GPT-3 model.Multistep reasoning is difficult for today's language models. We present a new technique to help. https://t.co/JRXUYZOSg7— OpenAI (@OpenAI) October 29, 2021 Точность алгоритма составила 55% — в два раза выше, чем у специально настроенной модели GPT-3. Для сравнения: в этом же тесте школьники в возрасте от 9 до 12 лет набирают 60%. Примеры правильного (слева) и неправильного (справа) решения математических задач. Данные: OpenAI. По словам разработчиков, достигнутый результат очень важен: «Современный ИИ все еще довольно слаб в многоэтапных рассуждениях, которые с легкостью удаются даже школьникам». Исследователи достигли таких результатов благодаря обучению модели распознавать свои ошибки и искать правильный ответ до тех пор, пока не найдет работающее решение. Также разработчики представили набор данных GSM8K, собранный для тренировки алгоритма. Он состоит из 8500 высококачественных словесных задач по математике для начальной школы. Для их решения требуется от двух до восьми шагов, на каждом из которых необходимо выполнять элементарные арифметические вычисления. Набор данных GSM8K доступен всем желающим на GitHub. Напомним, в октябре OpenAI разработала модель генерации коротких выжимок из художественных книг. В августе компания представила ИИ-инструмент Codex для автоматического написания программного кода. В июле OpenAI выпустила Python-подобный язык программирования Triton для разработки нейросетей. Подписывайтесь на новости ForkLog в Telegram: ForkLog AI — все новости из мира ИИ!