Trinity Large Preview

Trinity-Large-Preview — это передовая языковая модель с открытыми весами от Arcee, построенная как разреженная модель Mixture-of-Experts с 400 миллиардами параметров и 13 миллиардами активных параметров на токен, используя маршрутизацию 4 из 256 экспертов.

Она превосходит в творческом письме, рассказывании историй, ролевых играх, чат-сценариях и в режиме голосового помощника в реальном времени, лучше, чем обычно может средняя модель рассуждений. Но мы также представляем некоторые из наших новых агентных возможностей. Она была обучена хорошо ориентироваться в агентных оболочках, таких как OpenCode, Cline и Kilo Code, и справляться со сложными цепочками инструментов и длинными, насыщенными ограничениями подсказками.

Архитектура изначально поддерживает очень длинные контекстные окна до 512 тысяч токенов, при этом API Preview в настоящее время обслуживается с контекстом в 128 тысяч токенов, используя 8-битную квантизацию для практического развертывания. Trinity-Large-Preview отражает философию дизайна Arcee, ориентированную на эффективность, предлагая производственную модель передового уровня с открытыми весами и разрешительной лицензией, подходящей для реальных приложений и экспериментов.