Moondream: Moondream 3.1новая

Описание

Moondream 3.1 — это визуально-языковая модель от Moondream, преемница Moondream 3 Preview, с общим количеством параметров в 9 миллиардов и 2 миллиардами активных (архитектура Mixture-of-Experts). Она обрабатывает ответы на визуальные вопросы, генерирование подписей, оптическое распознавание символов (OCR) и визуальное рассуждение по изображениям, с контекстом в 32 тысячи токенов и опциональным режимом рассуждения.

Характеристики

API и примеры кода

from openai import OpenAI

client = OpenAI(
    base_url="https://infergate.ru/api/v1",
    api_key="sk-•••",
)

resp = client.chat.completions.create(
    model="moondream/moondream3.1-9b-a2b",
    messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)

Поддерживаемые параметры запроса