Meta планирует запустить систему генеративного ИИ не слабее GPT-4

Компания Meta планирует в начале 2024 года запустить обучение новой системы генеративного искусственного интеллекта. The Wall Street Journal пишет со ссылкой на источники, знакомые с планами компании, что новая большая языковая модель с открытым кодом должна быть такой же мощной, как самая продвинутая от OpenAI – GPT-4.

В июле этого года Meta представила Llama 2, являющуюся продолжением Llama – набора моделей ИИ, которые могут генерировать текст и код в ответ на подсказки, подобно чатам. The Wall Street Journal пишет, что по планам Meta новая система генеративного искусственного интеллекта (ИИ) будет в несколько раз мощнее Llama 2.

Meta рассчитывает начать обучение своей новой большой языковой модели в начале 2024 года на собственной инфраструктуре.

Группа для ускорения разработки генеративных инструментов ИИ была создана гендиректором Meta Марком Цукербергом в начале 2023 года. По словам источников WSJ, Цукерберг настаивает на том, чтобы новая модель, как и более ранние предложения Meta в области искусственного интеллекта, была с открытым исходным кодом и, следовательно, бесплатно предоставлялась компаниям для создания инструментов на базе ИИ. Планы относительно новой модели – часть усилий Цукерберга по утверждению Meta в качестве главной силы в мире ИИ.

• Читайте также:
• OpenAI запустила версию ChatGPT Enterprise для бизнеса
• Разработчик нейросетей предупреждает об их опасности
• Искусственный интеллект пока не признают автором созданного им произведения искусства

Сейчас Meta строит центры обработки данных, необходимые для работы новой модели и приобретает больше передовых чипов H100 от NVIDIA, их используют для обучения ИИ. По словам некоторых собеседников WSJ, ранее Meta объединилась с Microsoft, чтобы сделать Llama 2 доступной на платформе облачных вычислений Microsoft Azure, но новую модель компания планирует обучать на собственной инфраструктуре. Meta надеется, что новая модель ИИ будет примерно такой же по возможностям, как GPT-4 (OpenAI запустила ее в марте).

WSJ отмечает, что большие языковые модели обычно становятся более мощными при обучении большему количеству данных. Самая мощная версия модели Llama 2, представленная Meta в июле, была обучена работе с 70 миллиардами параметров (термин показывает число переменных в системе ИИ, используется для измерения размера ИИ). OpenAI не раскрывает размер GPT-4, по оценкам экспертов, он примерно в 20 раз больше, чем у Llama 2, – 1,5 триллиона параметров. Некоторые эксперты в области ИИ отмечают, что достичь мощности GPT-4, можно не приближаясь к его размерам.

Цукерберг ранее отстаивал модели искусственного интеллекта с открытым исходным кодом – они популярны из-за адаптивности и более низкой стоимости. К недостаткам таких ИИ юристы относят повышенные риски, связанные с использованием информации, потенциально защищенной авторским правом, и широкий доступ к инструменту, который может быть использован для генерации и распространения дезинформации или других недобросовестных действий.

«Детали», Ю.Л. Фото: Pixabay √