11.12.2023 12:55

У Alphabet лучший ИИ в мире?

Представленная на прошлой неделе модель искусственного интеллекта (ИИ) Gemini от Alphabet Inc. (NASDAQ: GOOGL) показала лучшие результаты в сравнении с конкурентами. Об этом свидетельствует 60-страничный отчет со сравнительными тестами. Однако подготовила его сама компания Google.


Alphabet представила Gemini, несмотря на слухи о том, что ИИ еще не готов для показа в 2023 г. Впрочем, пока разработки всех ИИ находятся на ранних этапах, и требуют времени для наработки баз данных и совершенствования.


По утверждению Google, самая мощная версия Gemini под названием Ultra в некоторых задачах сравнима по производительности со специалистом-человеком медианной квалификации. В частности, речь идет о тесте MMLU, который предназначен для того, чтобы оценить, способен ли ИИ работать точно и с минимальным количеством ошибок.


Проще говоря, хорошо обученные люди способны с первой попытки решить математическую задачу или ответить на вопросы по истории. Никому не нужен ИИ, который может найти ответ лишь после нескольких неудачных попыток. MMLU оценивает ИИ именно с такой точки зрения.

 


 В тестах MMLU Gemini Ultra преодолела показатель 90%, тогда как средний уровень людей составляет 34,5%, а людей-специалистов — 89,8%. Это самый лучший показатель в тестах MMLU среди всех больших языковых моделей, включая ChatGPT.


Пока только сама Google может опубликовать результаты тестов Gemini. Но как только новый ИИ появится в широком доступе, множество независимых тестеров проведут собственные сравнения, так что вряд ли Google стала бы значительно завышать показатели.


Пока же известно, что Alphabet протестировала Gemini во множестве сценариев, включая сложные логические задачи и применение на устройствах с ограниченным объемом памяти.

Очевидно, Alphabet рассчитывает на очень широкое применение Gemini. Одно из наиболее перспективных направлений — это написание программного кода. Именно для этого чаще всего используют ChatGPT.


Почти наверняка Gemini будет справляться с этой работой лучше, хотя бы потому, что у Alphabet большое количество специалистов и огромный опыт в создании инструментария для разработчиков софта.

В случае успеха даже на одном этом направлении, у Gemini большой потенциал для монетизации.


На торгах 8 декабря акция GOOGL стоила $134,99.