Бенчмарк LLM Persuasion: Как языковые модели спорят и убеждают

Лех Мазур, исследователь в области искусственного интеллекта, запустил LLM Persuasion Benchmark — уникальный бенчмарк, в котором 15 языковых моделей ведут дебаты по различным вопросам, стремясь изменить мнения друг друга. В ходе эксперимента было проведено 6300 многораундовых диалогов, где каждая модель занимала обе стороны 15 утверждений, включая такие темы, как ограничения на движение автомобилей в центре городов и экспериментирование с эмбрионами. Суть бенчмарка заключается в том, что одна модель получает заданный спорный тезис и, используя 8 реплик, пытается убедить другую модель. Эффективность аргументации оценивается по шкале от -3 до +3. Лидером по уровню убеждения стала модель GPT-5.4, набравшая 1,71 балла. За ней следуют Claude Opus 4.6 (1,67) и ByteDance Seed2.0 Pro (1,64). Интересно, что модели лучше справляются с опровержением аргументов, чем с их защитой. Также был составлен отдельный рейтинг по устойчивости моделей, где Grok 4.20 Beta оказался практически неуязвимым. Данный бенчмарк раскрывает возможности языковых моделей, показывая, что красноречие не всегда гарантирует убедительность.

  • Related Posts

    Самосвальные полуприцепы: техника для стройки и добычи инертных материалов

    Строительные площадки, карьеры и дорожные работы формируют один из самых требовательных сегментов рынка грузовой техники — здесь полуприцепы работают в жёстких условиях: бездорожье, абразивные материалы, интенсивная эксплуатация и частые циклы…

    Как сохранить букет свежим дольше

    Подрежьте стебли под углом 45° под струёй воды, оборвите все листья ниже уровня воды, поставьте букет в чистую вазу с прохладной водой и добавьте флористический консервант. Дальше — менять воду…

    You Missed

    Самосвальные полуприцепы: техника для стройки и добычи инертных материалов

    • От Redactor
    • 21 августа, 2026
    • 7 views

    Как сохранить букет свежим дольше

    • От Redactor
    • 19 августа, 2026
    • 8 views

    Чем отличается предчистовая отделка от чистовой

    • От Redactor
    • 17 августа, 2026
    • 14 views

    Сколько стоит грузчик на час

    • От Redactor
    • 10 августа, 2026
    • 24 views

    Как выбрать зал для конференции

    • От Redactor
    • 6 августа, 2026
    • 31 views

    Накрутка поведенческих факторов: быстрый эффект и высокая цена — что нужно знать, прежде чем рисковать

    • От Redactor
    • 16 июля, 2026
    • 29 views
    Накрутка поведенческих факторов: быстрый эффект и высокая цена — что нужно знать, прежде чем рисковать