Журналист Максим Лотт провёл эксперимент, в котором прогнал популярные нейросети через тест IQ.
Исследователь использовал визуальный IQ-тест компании Mensa, в котором используются картинки, а не текст. Сначала все нейросети провалили этот тест. Но потом Лотт описал картинки текстом и в таком виде заново прогнал тест для нейросетей. На этот раз ИИ справились с тестом, а некоторые и вовсе показали результат лучше, чем у среднестатистического человека.
Claude-3 оказался самым умным ИИ и лучшим в тесте — 101 балл. Следом за ним идёт ChatGPT-4 с 85 баллами. А замыкает тройку лидеров Claude-2 — 82 балла.
Интересно, что Copilot (79 баллов) немного отстаёт в тест от ChatGPT, хотя нейросеть Microsoft основана на технологиях OpenAI. Кроме того, базовый Gemini от Google (77,5 балла) показал более высокий результат по сравнению с продвинутым Gemini Advanced (76 баллов).
Лотт приходит к выводу, что, согласно закону Мура, через пару лет можно будет ожидать, что нейросети в тесте IQ будут набирать более 140 баллов, что значительно выше средних показателей человека.
