Зрение (Vision)

Блок Зрение читает документы и изображения и отвечает на ваш вопрос о них.

По умолчанию выбрана модель PailotOCR — распознавание документов Pailot внутри контура компании:

• Принимает PDF или изображение PNG, JPEG, WebP загруженным файлом или ссылкой — например, <start.pdf> из Старта. Файл платформы читается только при доступе к нему, внешняя ссылка скачивается с защитой от обращений во внутреннюю сеть.
• Распознаёт документ целиком: текст всех страниц, таблицы, колонтитулы и номера страниц.
• Затем локальная модель pailotgpt 3 отвечает на prompt по распознанному тексту.
• Ключ API (Application Programming Interface — программный интерфейс) не нужен, документ не уходит во внешние сервисы.
• В выходе content — ответ, document — весь распознанный документ для следующих блоков, warnings — предупреждения.

Другие модели:

• pailotgpt 3 — локальная мультимодальная модель: описывает фотографии, схемы и видео.
• gpt-4o и Claude 3 — облачные модели; нужен ключ API провайдера, его хранят в переменных окружения.

Блок не генерирует картинки — только читает их. Его ставят на холст отдельным шагом или прикрепляют к агенту.

Какой файл передавать

• Документ, который нужен постоянно. Загрузите его один раз в Настройки → Файлы, а в блоке откройте поле «Image File» и выберите его в списке — там рядом с «Upload New File» перечислены все файлы рабочего пространства. Ни ссылка, ни ключ хранилища не нужны. Поле доступно в обоих режимах блока.
• Разовый разбор. Загрузите файл в тест или пришлите его в чат и запустите процесс. Такой файл принадлежит своему запуску — для нового запуска загрузите его заново.
• Если файл нужен по ссылке (например, в другом блоке): в Настройках → Файлы нажмите «Скопировать ссылку» у нужного файла. Составлять ссылку или ключ вручную нельзя — ключ выдаётся при загрузке и из имени файла не выводится.
• Если блок отвечает «file not found». Файла по этой ссылке в хранилище больше нет. Загрузите документ заново и выберите его в блоке.
• Куда класть ссылку. В обычном режиме блока — поле «Image File» или «Image URL». Поле «Image File Reference» работает только в расширенном режиме: подстановка, оставленная в нём при обычном режиме, теряется, и блок отвечает «Either imageUrl or imageFile is required».

PailotOCR: предупреждения и ошибки

Если сервис PailotOCR не настроен или недоступен, блок вернёт ошибку и не отправит документ в облачную модель. Неподходящий файл (например, видео) даёт ошибку с объяснением. Если файл по ссылке уже удалён из хранилища (например, тестовый файл давнего запуска) или к нему нет доступа, блок сообщит «file not found» — загрузите файл заново.

Инструменты

vision_tool

Чтение документа PailotOCR или разбор изображения зрительной моделью.

Вход

Выход