Perceptron: Perceptron Mk1.5

Описание

Perceptron Mk1.5 — это модель воплощенного рассуждения Perceptron для физических агентов. Она принимает текстовые, графические, видео- и аудиовходы и отвечает текстом с необязательными структурированными аннотациями: точками, прямоугольниками, полигонами, траекториями и клипами. Она поддерживает градиентное рассуждение с помощью стандартных элементов управления рассуждением, вызова функций-инструментов и структурированных выводов через JSON Schema. Структурированные аннотации выводятся в строку вместе с текстом только при запросе через параметр `annotation_format` (`"point"`, `"box"` или `"polygon"` для пространственной локализации на изображениях, `"clip"` для временных сегментов в видео). Звуковые дорожки видео анализируются только при включении по запросу через `provider.options.perceptron.enable_audio_in_video: true`.

Характеристики

API и примеры кода

from openai import OpenAI

client = OpenAI(
    base_url="https://infergate.ru/api/v1",
    api_key="sk-•••",
)

resp = client.chat.completions.create(
    model="perceptron/perceptron-mk1.5",
    messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)

Поддерживаемые параметры запроса