Исследователи из Массачусетского технологического института и других организаций предложили новую технику, которая позволяет большим языковым моделям решать задачи на естественном языке, математике и анализе данных, а также символического рассуждения путем создания программ.

Их подход, называемый встроенными программами на естественном языке (NLEPs), включает в себя запрос языковой модели на создание и выполнение программы на Python для решения запроса пользователя, а затем вывод решения на естественном языке.

Они обнаружили, что NLEP позволяет большим языковым моделям достигать более высокой точности в широком спектре задач рассуждения. Подход также поддается обобщению, что означает, что одно приглашение NLEP можно повторно использовать для нескольких задач.

NLEP также повышают прозрачность, поскольку пользователь может проверить программу, чтобы увидеть, как именно модель аргументировала запрос, и исправить программу, если модель дала неправильный ответ.

источник —> https://news.mit.edu/2024/technique-improves-reasoning-capabilities-large-language-models-0614