DeepSeek R1 Distill Llama 70B — это дистиллированная большая языковая модель, основанная на [Llama-3.3-70B-Instruct](/meta-llama/llama-3.3-70b-instruct), использующая выходные данные из [DeepSeek R1](/deepseek/deepseek-r1). Модель сочетает в себе передовые методы дистилляции для достижения высокой производительности по нескольким бенчмаркам, включая: - AIME 2024 pass@1: 70.0 - MATH-500 pass@1: 94.5 - CodeForces Рейтинг: 1633 Модель использует тонкую настройку на основе выходных данных DeepSeek R1, что позволяет достигать конкурентоспособной производительности, сравнимой с более крупными передовыми моделями.
from openai import OpenAI
client = OpenAI(
base_url="https://infergate.ru/api/v1",
api_key="sk-•••",
)
resp = client.chat.completions.create(
model="deepseek/deepseek-r1-distill-llama-70b",
messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)modelstringобязательныйmessagesarrayобязательныйtemperaturenumbermax_tokensintegertop_pnumbertop_kintegerstopstring | string[]frequency_penaltynumberpresence_penaltynumberrepetition_penaltynumberseedintegerreasoningobjectinclude_reasoning