Загрузка...

MythoMax 13B

Разработчик:
Gryphe
Релиз:
Идентификатор:
gryphe/mythomax-l2-13b

Цены MythoMax 13B в рублях — от 8 ₽ за 1 млн токенов

Доступно 3 провайдера, цены от 8 ₽ до 44 ₽ за 1 млн токенов.
Провайдер подбирается автоматически — по доступности, затем по цене.

Тип операции Стоимость
Вход За 1 млн токенов
Токены, полученные и обработанные моделью при анализе пользовательского запроса и контекста. Включают текст сообщения, предыдущую историю диалога и все передаваемые данные.
8 ₽
Выход За 1 млн токенов
Токены, генерируемые моделью в виде ответа пользователю. Каждый символ, слово или часть ответа, созданные моделью, включаются в подсчёт выходных токенов.
12 ₽
Кэш: чтение не поддерживается
—
Кэш: запись не поддерживается
—

Возможности MythoMax 13B

Одна из самых высокопроизводительных и популярных доработок Llama 2 13B, с богатыми описаниями и ролевыми играми. #merge

Характеристики MythoMax 13B

  • 13 млрд параметров

Контекстное окно

Всего
8K токенов
На выход
4K токенов

Модальности

Вход
Текст
Выход
Текст
Поддерживает:
  • Структурированный вывод

Провайдеры MythoMax 13B

Модель развёрнута у 3 провайдеров: вход 8–44 ₽, выход 12–66 ₽ за 1 млн токенов.
Порядок выбора по умолчанию: сначала провайдеры без сбоев, среди них — самый дешёвый, остальные подстраховывают.

Как выбрать провайдера через API
Провайдер Вход Выход Контекст
Серверы: США (по штаб-квартире) Parasail fp16 8 ₽ 12 ₽ 4K
Mancer 2 fp8 38 ₽ 66 ₽ 8K
Серверы: США (по штаб-квартире) DeepInfra fp16 44 ₽ 44 ₽ 4K

Цены считаются по провайдеру, который фактически обработал запрос. Порядок в таблице — по возрастанию цены. Прочерк — провайдер не поддерживает операцию. Флаг — страна серверов или штаб-квартиры провайдера (на мобильном нажмите на первый столбец, на большом экране — на строку).

API MythoMax 13B:
подключение и примеры кода

API RouterAI совместим с OpenAI SDK: в существующем коде достаточно заменить base_url и ключ, идентификатор модели передаётся в поле model. Один ключ открывает доступ ко всем моделям каталога, лимиты и расход — в личном кабинете.

POST https://routerai.ru/api/v1/chat/completions
from openai import OpenAI

client = OpenAI(
    api_key="YOUR_API_KEY",
    base_url="https://routerai.ru/api/v1"
)

response = client.chat.completions.create(
    model="gryphe/mythomax-l2-13b",
    messages=[
        {"role": "user", "content": "Hello, how are you?"}
    ]
)

print(response.choices[0].message.content)

Эндпоинты API для MythoMax 13B

Схемы запроса и ответа повторяют OpenAI — существующие клиенты и SDK работают без изменений.

Chat Completions

Основной эндпоинт: принимает историю сообщений и возвращает ответ модели. Поддерживает потоковый (SSE) и обычный режимы.

POST https://routerai.ru/api/v1/chat/completions
Документация
Authorization
Bearer YOUR_API_KEY
Content-Type
application/json
Model
gryphe/mythomax-l2-13b

Поддерживаемые параметры запроса

Параметр Тип По умолчанию Описание
max_tokens integer — Верхний предел количества токенов, которые модель может сгенерировать в ответе.
temperature float 1 Влияет на разнообразие ответов модели: чем выше, тем более случайным будет вывод.
top_p float 1 Ограничивает выбор модели долей наиболее вероятных токенов: учитываются только токены, чьи вероятности в сумме дают P.
seed integer — Если задан, инференс выполняется детерминированно — повторные запросы с тем же seed и параметрами должны давать одинаковый результат.
logprobs boolean — Возвращать ли логарифмы вероятностей выходных токенов.

Частые вопросы о MythoMax 13B

Попробуйте MythoMax 13B

В чате или по API — доступ из России за пару минут, оплата в рублях.

Открыть в чате