Qwen: Qwen3 30B A3B

Qwen3, последнее поколение в серии больших языковых моделей Qwen, имеет как плотную архитектуру, так и архитектуру со смешанным участием экспертов (MoE), позволяющую добиться превосходных результатов в рассуждениях, многоязычной поддержке и расширенных задачах агентов. Его уникальная способность плавно переключаться между режимом мышления для сложных рассуждений и режимом отсутствия мышления для эффективного диалога обеспечивает универсальную и высококачественную работу. Значительно превосходя предыдущие модели, такие как QwQ и Qwen2.5, Qwen3 обеспечивает превосходные математические функции, программирование, здравое рассуждение, творческое письмо и возможности интерактивного диалога. Вариант Qwen3-30B-A3B включает 30,5 миллиардов параметров (3,3 миллиарда активированных), 48 слоев, 128 экспертов (8 активируемых на каждую задачу) и поддерживает до 131 тысяч контекстов токенов с помощью YaRN, устанавливая новый стандарт среди моделей с открытым исходным кодом.