ИИ впервые прошел тест Тьюринга: GPT-4.5 обманул людей в 73% случаев

В слепом тестировании участники эксперимента чаще считали человеком чат-бот, чем реальных собеседников. Препринт публикации, которая пока не прошла официального рецензирования, опубликован на портале arXiv.

Впервые модель искусственного интеллекта официально прошла тест Тьюринга — способ оценки способности машины выдавать себя за человека. В эксперименте, которые провели ученые из Калифорнийского университета в Сан-Диего, участники принимали модель GPT-4.5 от OpenAI за человека в 73% случаев при трехстороннем общении.

Тест Тьюринга, предложенный математиком Аланом Тьюрингом в 1950 году, долгое время считался золотым стандартом для определения человекоподобного интеллекта машин. В классической версии теста человек-экзаменатор общается одновременно с человеком и компьютером через текстовый интерфейс и пытается определить, кто есть кто.

В эксперименте участвовало около 300 человек, которых случайным образом разделили на две группы: половина была экзаменаторами, а вторая половина — пыталась доказать, что они люди. Каждый экзаменатор общался параллельно с человеком и с чат-ботом. В конце теста участников просили определить, кто из двух собеседников искусственный интеллект.

Тесты провели в двух вариантах: в одном ИИ предварительно просили принять роль определенного человека, например, молодого интернет-гика. В других случаях чат-бот действовал без подсказок. В режиме имитации человека сразу две модели показали результаты выше 50%: GPT-4.5 приняли за человека в 75,5% случаев, а LLaMa от Meta* — в 64,7%.

Результаты тестирования моделей.

Примечательно, что без специальных подсказок результаты были существенно ниже — GPT-4.5 достигла лишь 36% успеха, а GPT-4o — всего 21%. Удивительным открытием стало то, что даже примитивный чат-бот ELIZA, разработанный около 80 лет назад, показал результат в 23%.

Попробовать опознать искусственный интеллект можно на сайте проекта.

Эксперты отмечают, что прохождение теста Тьюринга не означает, что ИИ действительно мыслит как человек. Современные языковые модели тренируются на огромных объемах текста, созданного людьми, что позволяет им мастерски имитировать человеческую речь даже в ситуациях, когда они не понимают сути вопроса.

* Компания Meta Platforms Inc. признана в России экстремистской. Деятельность компании и принадлежащих ей социальных сетей Facebook и Instagram на территории РФ запрещена


Читать далее:

Ученые в тупике: «Уэбб» засек невозможный свет в галактике

Живые клетки обрабатывают информацию в миллиарды раз быстрее, чем считалось ранее

Вселенная внутри черной дыры: наблюдения «Уэбба» подтверждают странную гипотезу

Иллюстрация на обложке: designed by Freepikсведения о лицензии

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Найдена гигантская нить в космосе: она соединяет четыре скопления галактик
Космос
В Китае установили мировой рекорд: 11 787 дронов создали световое шоу
Новости
Вирус герпеса перестраивает геном человека, но есть способ его остановить
Наука
Разработаны роботы размером с игрушечную машинку для ремонта водопроводных труб
Новости
В Самаре запустили первый в России дата-центр, объединяющий майнинг и ИИ
Новости
Болезнь Паркинсона на ранней стадии определят по ушной сере
Наука
BI-стратегия компании: что она дает и как ее создать
Мнения
В Мариинке показали оперу, которую дописал искусственный интеллект
Новости
Открыт нейронный путь, который приводит к бессонице после перенесенного стресса
Наука
Китайский маглев установил рекорд: разогнался до 650 км/ч за семь секунд
Новости
Австралийские бабочки используют звезды для навигации в пространстве
Наука
Древний череп из Китая впервые позволил понять, как выглядели денисовцы
Наука
Открыта загадочная связь между уровнем кислорода и магнитным полем Земли
Космос
Альтернатива сжиганию: разработана технология переработки угля в высокотехнологичное сырье
Наука
Ракета Starship Илона Маска взорвалась на площадке при подготовке к испытаниям
Космос
TECNO MEGABOOK K15S: универсальный ноутбук для тех, кто работает, создает и отдыхает
Кейсы
Два китайских спутника встретились на орбите Земли
Космос
В Москве пройдет второй Международный технологический конгресс МТК-2025
Новости
Из перовскита создали датчик изображения, который улавливает в три раза больше света
Новости
ИИ научили предсказывать риск провала технологических новинок
Новости