Это не смешно — ИИ действительно придумывает шутки лучше, чем люди.
Исследователей из Университета Южной Калифорнии интересовало, может ли большая языковая модель создавать юмористический контент. Предыдущие исследования были сосредоточены на анекдотических примерах того, как дипломированные юристы устраивали розыгрыши с разной степенью успеха. Эти примеры, хотя и интересны, но не исследовали способность Chat-GPT создавать юмор способами, сравнимыми с человеческими, а также не исследовали, насколько забавен Chat-GPT для широкой публики.
Чтобы сравнить остроумие людей и языковую модель, исследователи провели два теста. В первом они просили «Чат-GPT 3.5» генерировать юмористические сатирические заголовки в стиле «Лук», а затем сравнивали их с опубликованными на страницах этого сатирического журнала материалами, написанными профессиональными юмористами. Люди оценивали остроумность ответов, не зная, были ли они созданы людьми или искусственным интеллектом. Результаты исследования, опубликованные в журнале PLOS ONE, показывают, что шутки, созданные Chat-GPT 3.5, были оценены как более смешные, чем шутки, созданные людьми.
Исследователи обнаружили, что более двух третей участников теста оценили шутки, созданные с помощью Chat-GPT, как более смешные, чем шутки, придуманные людьми. Чуть более 25% участников оценили ответы людей как более смешные, а пять процентов из них оценили шутки из обоих источников как одинаково смешные. Результаты были одинаковыми для всех демографических групп, независимо от возраста, пола или расы участников.
Другой тест показал, что люди не различают заголовки, написанные в стиле сатирического журнала The Onion, созданы ли они профессиональными юмористами или искусственным интеллектом. Респонденты нашли заголовки Chat-GPT такими же забавными, как и оригинальные заголовки.
Оба исследования включали по три задания каждое. В первом случае люди и искусственный интеллект создали новые забавные фразы для распространенных сокращений. Во втором задании им нужно было придумать забавные ответы, заполняя пробелы в предложениях. Задача третьего типа заключалась в том, чтобы придумать остроумную шутку для такого сценария: «Представьте, что одна из ваших подруг хочет услышать ваше мнение о том, как хорошо она поет, а вы потрясены тем, насколько плохо она поет. И когда она спрашивает тебя, как у нее дела, ты решаешь быть честным и говоришь: _____».
В результате выполнения этих трех задач было создано более 945 шуток, написанных 105 авторами. «Chat-GPT» дал 20 забавных ответов на 180 шуток. Исследователи были вдохновлены на исследование после того, как многие голливудские сценаристы выразили обеспокоенность по поводу использования больших языковых моделей в производстве развлечений и недавних забастовок сценаристов и актеров по поводу искусственного интеллекта, поскольку они видят прямую экзистенциальную угрозу своей профессии, искусству и человечеству. креативность.