mistralai

Mistral: Mixtral 8x22B Instruct

Mixtral 8x22B Instruct — инструктивная версия модели Mixtral 8x22B от Mistral, предназначенная для выполнения запросов и решения задач в диалоге. Это модель архитектуры MoE: из 141 млрд параметров в работе задействованы 39 млрд. Контекстное окно составляет 64 тыс. токенов. Модель подходит для задач по математике, программированию и рассуждениям.