Inkling — это мультилингвальная многомодальная модель типа смесь экспертов с открытым исходным кодом от Thinking Machines Lab, содержащая 41 миллиард активных параметров из 975 миллиардов общих. Она разработана для универсального рассуждения, кодирования, агентных систем и систем использования инструментов, генерации с дополнением извлечёнными данными, следования инструкциям и многоязычных диалоговых приложений. Ее нативное понимание изображений и аудио поддерживает многомодальный анализ наряду с текстом.
from openai import OpenAI
client = OpenAI(
base_url="https://infergate.ru/api/v1",
api_key="sk-•••",
)
resp = client.chat.completions.create(
model="thinkingmachines/inkling:batch",
messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)modelstringобязательныйmessagesarrayобязательныйtemperaturenumbermax_tokensintegertop_pnumbertop_kintegermin_pnumberstopstring | string[]frequency_penaltynumberpresence_penaltynumberrepetition_penaltynumberlogit_biasobjecttoolsarraytool_choicestring | objectreasoningobjectreasoning_effortstringinclude_reasoningboolean