Представлена Llama 4: самая большая модель Meta*

В компании утверждают, что это новый уровень мультимодальных моделей. Рассказываем подробнее о разработках. Meta* представила новое поколение своих ИИ-моделей — семейство Llama 4, которое знаменует значительный прорыв в области искусственного интеллекта. Новые модели обладают нативной мультимодальностью, позволяющей работать с текстом, изображениями и видео в рамках единой архитектуры. Три модели для разных задач В семейство Llama 4 входят три основные модели, каждая со своими особенностями: Llama 4 Scout Scout — компактная модель с 17 миллиардами активных параметров и 109 миллиардами общих параметров. Ключевая особенность Scout — рекордное контекстное окно в 10 миллионов токенов, что примерно в 80 раз больше, чем у предыдущей версии Llama 3 (128 тысяч токенов). Это позволяет модели обрабатывать огромные объемы информации — целые книги, технические документации или многочасовые диалоги за один раз. Scout может работать на одном GPU NVIDIA H100, что делает ее доступной для широкого круга разработчиков. Модель поддерживает 12 языков и превосходит аналоги сопоставимого размера, включая Gemma 3 и Gemini 2.0 Flash-Lite.

Апр 6, 2025 - 19:19
 0
Представлена Llama 4: самая большая модель Meta*

В компании утверждают, что это новый уровень мультимодальных моделей. Рассказываем подробнее о разработках.

Meta* представила новое поколение своих ИИ-моделей — семейство Llama 4, которое знаменует значительный прорыв в области искусственного интеллекта. Новые модели обладают нативной мультимодальностью, позволяющей работать с текстом, изображениями и видео в рамках единой архитектуры.

Три модели для разных задач

В семейство Llama 4 входят три основные модели, каждая со своими особенностями:

Llama 4 Scout

Scout — компактная модель с 17 миллиардами активных параметров и 109 миллиардами общих параметров. Ключевая особенность Scout — рекордное контекстное окно в 10 миллионов токенов, что примерно в 80 раз больше, чем у предыдущей версии Llama 3 (128 тысяч токенов). Это позволяет модели обрабатывать огромные объемы информации — целые книги, технические документации или многочасовые диалоги за один раз.

Scout может работать на одном GPU NVIDIA H100, что делает ее доступной для широкого круга разработчиков. Модель поддерживает 12 языков и превосходит аналоги сопоставимого размера, включая Gemma 3 и Gemini 2.0 Flash-Lite.