Это флагманская модель Mistral AI, Mistral Large 2 (версия mistral-large-2407). Это проприетарная модель с доступными весами, превосходно справляющаяся с рассуждениями, кодом, JSON, чатом и многим другим. С анонсом запуска можно ознакомиться [здесь](https://mistral.ai/news/mistral-large-2407/). Она поддерживает десятки языков, включая французский, немецкий, испанский, итальянский, португальский, арабский, хинди, русский, китайский, японский и корейский, а также более 80 языков программирования, включая Python, Java, C, C++, JavaScript и Bash. Ее большое контекстное окно обеспечивает точное извлечение информации из больших документов.
from openai import OpenAI
client = OpenAI(
base_url="https://infergate.ru/api/v1",
api_key="sk-•••",
)
resp = client.chat.completions.create(
model="mistralai/mistral-large-2407",
messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)modelstringобязательныйmessagesarrayобязательныйtemperaturenumbermax_tokensintegertop_pnumberstopstring | string[]frequency_penaltynumberpresence_penaltynumberseedintegerresponse_formatobjectstructured_outputsbooleantoolsarraytool_choice