Новейшее семейство моделей Meta (Llama 3.1) было выпущено в различных размерах и вариантах. Эта 70B версия, настроенная для выполнения инструкций, оптимизирована для высококачественных диалоговых сценариев использования. Она продемонстрировала высокую производительность по сравнению с ведущими моделями с закрытым исходным кодом в человеческих оценках. Чтобы узнать больше о выпуске модели, [нажмите здесь](https://ai.meta.com/blog/meta-llama-3-1/). Использование этой модели регулируется [Политикой допустимого использования Meta](https://llama.meta.com/llama3/use-policy/).
from openai import OpenAI
client = OpenAI(
base_url="https://infergate.ru/api/v1",
api_key="sk-•••",
)
resp = client.chat.completions.create(
model="meta-llama/llama-3.1-70b-instruct",
messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)modelstringобязательныйmessagesarrayобязательныйtemperaturenumbermax_tokensintegertop_pnumbertop_kintegermin_pnumberstopstring | string[]frequency_penaltynumberpresence_penaltynumberrepetition_penaltynumberseedintegerlogit_biasobjectresponse_formatobjectstructured_outputsbooleantoolsarraytool_choicestring | object