TypeSafe: Jev Router

Описание

Jev Router выбирает лучшую модель и уровень обоснования для каждого запроса, балансируя качество, скорость и стоимость. Он работает на Jev, первой модели System One от TypeSafe, и адаптируется по мере развития вашего диалога. Один конечный узел предоставляет вам всю экосистему моделей, используя долю токенов и расходов экосистемы.

Характеристики

API и примеры кода

from openai import OpenAI

client = OpenAI(
    base_url="https://infergate.ru/api/v1",
    api_key="sk-•••",
)

resp = client.chat.completions.create(
    model="typesafe/jev-router",
    messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)

Поддерживаемые параметры запроса