EsoLang-Bench: ИИ и эзотерические языки программирования

Лаборатория Lossfunk анонсировала EsoLang-Bench, представляющий собой бенчмарк из 80 заданий на пяти эзотерических языках программирования: Brainfuck, Befunge-98, Whitespace, Unlambda и Shakespeare. Пять высокопроизводительных моделей, включая GPT-5.2 и Gemini 3 Pro, продемонстрировали низкую точность — от 0 до 11% в задачах, которые обычный студент решит на Python за считанные минуты. Никто из ИИ не справился с задачами выше уровня Easy. Эзотерические языки, созданные как интеллектуальные вызовы, отличаются необычным синтаксисом и скромным количеством обучающих данных. Примечательно, что высокие результаты на стандартных бенчмарках оказываются лишь следствием запоминания шаблонов, а не реальных вычислительных навыков. Только прямая обратная связь от интерпретатора улучшила результаты, тогда как few-shot примеры показали незначительный прирост.

  • Related Posts

    Самосвальные полуприцепы: техника для стройки и добычи инертных материалов

    Строительные площадки, карьеры и дорожные работы формируют один из самых требовательных сегментов рынка грузовой техники — здесь полуприцепы работают в жёстких условиях: бездорожье, абразивные материалы, интенсивная эксплуатация и частые циклы…

    Как сохранить букет свежим дольше

    Подрежьте стебли под углом 45° под струёй воды, оборвите все листья ниже уровня воды, поставьте букет в чистую вазу с прохладной водой и добавьте флористический консервант. Дальше — менять воду…

    You Missed

    Самосвальные полуприцепы: техника для стройки и добычи инертных материалов

    • От Redactor
    • 21 августа, 2026
    • 10 views

    Как сохранить букет свежим дольше

    • От Redactor
    • 19 августа, 2026
    • 11 views

    Чем отличается предчистовая отделка от чистовой

    • От Redactor
    • 17 августа, 2026
    • 14 views

    Сколько стоит грузчик на час

    • От Redactor
    • 10 августа, 2026
    • 24 views

    Как выбрать зал для конференции

    • От Redactor
    • 6 августа, 2026
    • 32 views

    Накрутка поведенческих факторов: быстрый эффект и высокая цена — что нужно знать, прежде чем рисковать

    • От Redactor
    • 16 июля, 2026
    • 30 views
    Накрутка поведенческих факторов: быстрый эффект и высокая цена — что нужно знать, прежде чем рисковать