PrismML: Ternary Bonsai 2 27B

Описание

Bonsai 2 27B — это модель логического вывода с 27 миллиардами параметров от PrismML, созданная на основе Qwen3.8-27B. Она поддерживает кодирование, математику, вызов инструментов и понимание изображений с контекстным окном в 262 тысячи токенов. Троичное сжатие уменьшает веса языковой модели примерно до 8,5 ГБ, сохраняя 98,2% среднего балла базовой модели по 14 эталонным тестам PrismML для режимов мышления, что обеспечивает эффективный вывод на потребительском оборудовании. Модель думает по умолчанию и использует высокие усилия для рассуждений.

Характеристики

API и примеры кода

from openai import OpenAI

client = OpenAI(
    base_url="https://infergate.ru/api/v1",
    api_key="sk-•••",
)

resp = client.chat.completions.create(
    model="prism-ml/ternary-bonsai-2-27b",
    messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)

Поддерживаемые параметры запроса