Тех.эксперт Дорохова: Не следует делать выводы о превосходстве ИИ по одному IQ-тесту

По мнению российских экспертов тот факт, что в эксперименте журналиста и продюсера Fox News Лотта нейросеть получила более баллов в IQ-тесте, чем у среднестатистического человека, не говорит о развитии искусственного интеллекта (ИИ). Об этом сообщает РБК.

Напомним, что в начале марта 2024 года американский журналист Максим Лотт обнародовал результаты проведенного им эксперимента с различными нейросетями, в котором он применил визуальный IQ-тест компании Mensa.

«Эксперимент Лотта, в котором нейросеть показала лучший результат IQ-теста по сравнению со средним у людей, интересен, но не является основанием для сравнения ИИ и интеллекта человеческого или оценки развития ИИ, в этом следует быть осторожными», — прокомментировали отечественные эксперты в области технологий.

Уточняется, что сначала все нейросети провалили тест, но потом Лотт описал используемые в нем картинки текстом, после чего ИИ справился с задачей. Лучший результат показала Claude-3 от Anthropic (бывшие разработчики OpenAI, которая создала Chat GPT, занявшую второе место), вышедшая за день до проведения эксперимента, — 101 балл. Это выше среднего показателя для человека, обычно составляющая 100 баллов.

«По закону Мура, через два года нейросети смогут показывать результат 140 баллов, что гораздо больше среднего показателя для человека», — прогнозирует Лотт.

По словам технического директора «Яков и партнеры Digital» Федора Чемашкина, генеративный ИИ обучается на «огромном массиве данных», в который входит и информация о тестах IQ, подвергающаяся критике за чет того, что они проверяют в основном логическое мышление и зависят от психоэмоционального состояния. По мнению специалиста, итоги теста Лотта были ожидаемы, ИИ со временем будет только лучше проходить такие тесты, после того, как изучит различные модели логического мышления, к тому же ИИ независим, не зависит от психоэмоционального состояния.

В свою очередь, руководитель проектов «Яков и партнеры», соавтор исследования «Искусственный интеллект в России — тренды и перспективы» Марина Дорохова назвала использование теста IQ как одного из возможных бенчмарков для ИИ «интересным подходом», подчеркнув, что и пользователи, и компании в большей степени заинтересованы в оценки способности нейросети решать прикладные задачи.

Ранее «Медздрав.Инфо» сообщал, что уникальный компьютерный алгоритм Life2vec стал основой для создания нейросети, предсказывающей жизненный путь человека и помогающей избежать преждевременной смерти, разработали ученые из Технического университета Дании.