🤖 Релиз мультимодальной модели MiniMax-M3
Компания MiniMax выпустила модель MiniMax-M3 с поддержкой контекста до 1 млн токенов. Благодаря механизму MiniMax Sparse Attention (MSA) и двухветвевой архитектуре, модель работает в разы быстрее стандартных решений при значительно меньших затратах ресурсов.
🌍 Появление эффективных механизмов разреженного внимания (Sparse Attention) открывает путь к масштабированию сверхдлинного контекста без квадратичного роста затрат. Это делает мультимодальных агентов более доступными для коммерческого использования.
👤 Вы сможете работать с огромными объемами данных, такими как целые библиотеки книг или длинные видео, гораздо быстрее и дешевле, чем с текущими архитектурами.
Источник 1: https://huggingface.co/MiniMaxAI/MiniMax-M3 Источник 2: https://arxiv.org/abs/2606.13392