Inkling Small — это открытая мультимодальная модель типа Mixture-of-Experts (MoE) от Thinking Machines Lab, имеющая 12 миллиардов активных параметров из общего числа в 276 миллиардов. Она позиционируется как самый компактный и эффективный представитель семейства Inkling и подходит для задач рассуждения, кодирования, агентских рабочих процессов, генерации с дополненной выборкой (RAG), выполнения инструкций и многоязычного общения.
from openai import OpenAI
client = OpenAI(
base_url="https://infergate.ru/api/v1",
api_key="sk-•••",
)
resp = client.chat.completions.create(
model="thinkingmachines/inkling-small",
messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)modelstringобязательныйmessagesarrayобязательныйtemperaturenumbermax_tokensintegertop_pnumbertop_kintegermin_pnumberstopstring | string[]frequency_penaltynumberpresence_penaltynumberrepetition_penaltynumberseedintegerlogit_biasobjectlogprobsbooleantop_logprobsintegertoolsarraytool_choicestring | objectreasoningobjectreasoning_effortstringinclude_reasoningboolean