Искусственный интеллект уже опережает человека во многих интеллектуальных тестах — исследование 

Институт искусственного интеллекта при Стэнфордском университете (HAI) представил свой седьмой ежегодный отчет AI Index , отражающий стремительную эволюцию ИИ и его растущее влияние на нашу повседневную жизнь. Об этом пишет SecurityLab. 

Отчёт охватывает широкий спектр тем — от секторов, активно внедряющих ИИ, до стран, обеспокоенных потерями рабочих мест. Однако одним из наиболее примечательных выводов стало сокращение разрыва между способностями человека и машины в решении сложных задач.

На графике линии разных цветов указывают на уровень способностей ИИ в определенных сферах. Пунктирная линия — средний показатель для человека. Данные получены при использовании старых, возможно уже устаревших бенчмарков, однако общая тенденция предельно очевидна. Траектории развития ИИ поражают специалистов, особенно почти вертикальные линии, отражающие результаты самых последних тестов. При этом важно помнить, что машины подобны виртуальным младенцам, лишь начинающим свой путь.

К примеру, уже к 2015 году ИИ превзошел людей в классификации изображений. Затем, в 2017-м, он обогнал нас в базовом понимании текста, в 2020-м — в визуальном рассуждении, а в 2021-м — в умении делать логические выводы на основе естественного языка.

В 2023 году у ИИ по-прежнему возникали трудности со сложными когнитивными задачами вроде решения продвинутых уравнений и визуального рассуждения. Впрочем, термин «трудности» здесь не совсем подходит — на самом деле он демонстрировал впечатляющие результаты.

За два последних года в решении математических задач произошел большой скачок. Если в 2021 году алгоритмы могли справиться лишь с 6,9% задач из набора MATH, состоящего из 12 500 олимпиадных примеров, то в 2023-м модель на базе GPT-4 решила уже 84,3% из них. Для сравнения, у людей этот показатель составил 90%.

Визуальное общее рассуждение (VCR) оценивает способность ИИ использовать здравый смысл в визуальном контексте для логических умозаключений. Например, увидев картинку с котом на столе, ИИ с VCR должен предположить, что кот может спрыгнуть со стола или что стол достаточно прочный, чтобы выдержать его вес. В 2022-2023 годах показатель VCR вырос на 7,93% до 81,6 из 100 баллов по сравнению с 85 баллами у человека. Еще пять лет назад трудно было себе представить, что компьютер сможет понимать контекст изображения на таком уровне.

Очевидно, что искусственный интеллект никуда не денется. Его стремительное развитие в 2023 году, отраженное в отчете, показывает, что ИИ будет развиваться все быстрее, сокращая разрыв с человеческими возможностями. Следующий выпуск AI Index непременно станет еще более содержательным и впечатляющим.

Контекст 

• Кембриджский словарь английского языка (Cambridge Dictionary) выбрал глагол «галлюцинировать» (hallucinate) словом 2023 года. Выбор обусловило развитие технологий искусственного интеллекта (ИИ). 

• Ранее один из руководителей Google предупредил о «галлюцинациях» искусственного интеллекта, с которыми можно столкнуться при использовании набирающих популярность чат-ботов. Явление выражается в том, что человек может получить убедительный, но полностью выдуманный ответ.