Институт инженеров электротехники и электроники (IEEE) провел тест Тьюринга, чтобы оценить, насколько современные модели искусственного интеллекта могут имитировать человеческое общение.

В эксперименте участвовали 500 человек, которым предлагалось общаться с четырьмя собеседниками: одним человеком и тремя ИИ-моделями — ELIZA 1960-х годов, GPT-3.5 и GPT-4.

Результаты показали, что 54% участников приняли GPT-4 за человека. GPT-3.5 удалось обмануть 50% испытуемых, а более старой модели ELIZA — лишь 22%. Человек был распознан как человек 67% участников.

Исследователи искусственного интеллекта из IEEE отметили, что современные ИИ-системы все чаще демонстрируют поведение, свойственное людям, включая способности к манипуляции и даже умышленному обману.

Тест Тьюринга, впервые предложенный в 1950 году ученым Аланом Тьюрингом, оценивает, насколько способность машины проявлять интеллект неотличима от человеческой.