Perceptron Mk1 (Mark One) — это модель зрения и языка от Perceptron высочайшего качества для видео и инкорпорированного рассуждения. Она принимает на вход изображения и видео в сочетании с запросами на естественном языке и выдает подробные ответы с визуальным пониманием, как в структурированном, так и в естественном языке. Она отлично справляется с задачами анализа видео, такими как ответы на вопросы по видео, суммаризация и обнаружение событий. Для входных данных в виде изображений она улучшает локализацию по точке на примере на основе мультимодальных запросов, OCR и разбора документов в зашумленных реальных данных, обнаружение и подсчет объектов по открытому словарю, а также оценку положения руки. Рассуждение может быть включено по запросу для обмена задержки на более глубокий анализ более сложных задач. Структурированные аннотации выдаются в тексте только при явном запросе через параметр `annotation_format` (укажите `"point"`, `"box"` или `"polygon"` для пространственной локализации на изображениях, или `"clip"` (временные метки начала/конца) для временных сегментов в видео). Без `annotation_format` модель возвращает только текст на естественном языке.
from openai import OpenAI
client = OpenAI(
base_url="https://infergate.ru/api/v1",
api_key="sk-•••",
)
resp = client.chat.completions.create(
model="perceptron/perceptron-mk1",
messages=[{"role": "user", "content": "Привет!"}],
)
print(resp.choices[0].message.content)modelstringобязательныйmessagesarrayобязательныйtemperaturenumbermax_tokensintegertop_pnumbertop_kintegerfrequency_penaltynumberpresence_penaltynumberstructured_outputsbooleanreasoningobjectinclude_reasoningboolean