Мультимодальные данные
Формат мультимодального ввода зависит от API и возможностей модели.
Подходы
| Данные | Типичная передача |
|---|---|
| Текст | Строка или типизированный текстовый элемент |
| Изображение | URL, data URL или ссылка на загрузку |
| Файл | Идентификатор файла или загрузки либо поддерживаемый URL |
| Аудио | Составная загрузка или типизированный аудиоэлемент |
Рекомендации
- Проверяйте поддерживаемые входные модальности модели.
- Ограничивайте размер, MIME-тип и источник файлов на сервере.
- Не загружайте приватные URL, доступные только внутренней сети.
- Для URL-загрузок защищайтесь от SSRF.
- Не рассчитывайте, что один формат блоков содержимого одинаково работает во всех API.
Для новых мультимодальных интеграций используйте Responses API. Для прямой работы с изображениями и аудио используйте Images API и Audio API.