Цель исследования заключалась в определении способности участников отличить синтетического собеседника от живого человека. Тест, разработанный знаменитым математиком Аланом Тьюрингом ещё в 1950 году, считается пройденным, если ИИ-алгоритм может заставить человека думать, что беседу с ним ведёт другой человек.
В тестировании приняли участие 500 человек, которые общались с каждым из агентов в течение пяти минут, после чего должны были определить, с кем они разговаривали — с человеком или чат-ботом. В результате было установлено, что 54 % участников приняли GPT-4 за человека. ELIZA, не имея большой языковой модели и архитектуры нейросети, была признана человеком только в 22 % случаев. Алгоритм на базе GPT-3.5 был признан человеком в 50 % случаев, а человека опознали в 67 % случаев.
Источник: https://3dnews.ru/1106570/ii-stanovitsya-umnee-chatbot-na-baze-gpt4-proshyol-test-tyuringa
Если вам понравился материал, кликните значок - вы поможете нам узнать, каким статьям и новостям следует отдавать предпочтение. Если вы хотите обсудить материал - не стесняйтесь оставлять свои комментарии : возможно, они будут полезны другим нашим читателям!
