Это флагманская модель Mistral AI, Mistral Large 2 (версия `mistral-large-2407`). Это коммерческая модель с доступными весами, которая превосходно справляется с рассуждениями, кодом, JSON, чатом и многим другим. Подробности анонса можно прочитать [здесь](https://mistral.ai/news/mistral-large-2407/). Она поддерживает десятки языков, включая французский, немецкий, испанский, итальянский, португальский, арабский, хинди, русский, китайский, японский и корейский, а также более 80 языков программирования, включая Python, Java, C, C++, JavaScript и Bash. Ее большое контекстное окно позволяет точно извлекать информацию из больших документов.
from openai import OpenAI
client = OpenAI(
base_url="https://infergate.ru/api/v1",
api_key="sk-•••",
)
resp = client.chat.completions.create(
model="mistralai/mistral-large",
messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)modelstringобязательныйmessagesarrayобязательныйtemperaturenumbermax_tokensintegertop_pnumberstopstring | string[]frequency_penaltynumberpresence_penaltynumberseedintegerresponse_formatobjectstructured_outputsbooleantoolsarraytool_choice