Искусственный интеллект уже превосходит людей почти во всех показателях производительности

19.04.2024, 20:01 meta.ua

Всем заметно, что технологии искусственного интеллекта кардинально продвинулись за последние два года. Мы часто слышим, что ИИ превзошел людей в той или иной сфере, но новый отчет Института искусственного интеллекта Стэнфордского университета показывает, что искусственный интеллект уже превосходит людей почти во всех показателях производительности.

Детали

ИИ становится настолько умным и быстрым, что многие используемые к этому моменту тесты уже устарели. ИИ настолько хорошо справляется с прохождением тестов, что теперь нам нужны новые тесты – не для измерения компетентности, а для того, чтобы выделить сферы, где люди и искусственный интеллект все еще отличаются, и найти где мы все еще имеем преимущество. Просто взгляните на график, на котором отмечено развитие ИИ в разных аспектах (пунктирная линия показывает уровень человека).

При этом речь уже не идет о сравнении среднестатистических людей и ИИ в, например, решении сложных математических задач. В среднем люди проигрывают ИИ, и только профессиональные математики могут превосходить алгоритмы.

В 2024 вот что с передовой математикой, и мы все еще находимся на заре эры ИИ.

Затем следует визуальное рациональное рассуждение (VCR). Кроме простого распознавания объектов, VCR оценивает, как искусственный интеллект использует здравый смысл в визуальном контексте для прогнозирования. Например, когда показано изображение кота на столе, ИИ с VCR должен предположить, что кот может спрыгнуть со стола или что стол достаточно крепкий, чтобы удержать его, учитывая его вес. В отчете установлено, что между 2022 и 2023 гг. показатель VCR для ИИ вырос на 7,93% до 81,60, где базовый показатель для человека составляет 85.

Большие языковые модели (LLM) ИИ позволяет создавать большое количество текстового контента, но LLM все еще не лишены ошибок и галлюцинаций, GPT-4, выпущенный в начале 2024 года, достиг наивысшей производительности в эталонном тесте с оценкой 0,59, что почти в три раза превышает модель на основе GPT-2, протестированную в 2021 году. Такое улучшение указывает на то, что LLM постепенно улучшается в плане правдивости.

Невероятно быстро ИИ развивается в создании изображений. В качестве примера посмотрите, как Midjourney улучшила свои способности в рисовании Гарри Поттера за 22 месяца.

Как показывает последний отчет, данные которого исчерпываются началом 2024 года, этот год будет еще более впечатляющим в развитии искусственного интеллекта, поэтому следует ожидать, что ИИ может уже в этом году нивелировать разрыв между людьми и технологиями в тех сферах, где он все еще заметен.

Ранее КМУ одобрил концепцию государственной программы об использовании ИИ в приоритетных отраслях экономики.