Мультимодальность — что это такое

Multimodality

Модель принимает не только текст.

Описание

На вход могут подаваться изображения, звук, видео или файлы. Модель разбирает их вместе с текстом запроса: читает скриншот, распознаёт схему, слушает запись. Выход при этом чаще всего остаётся текстовым.

Что учесть при выборе

Определяет, можно ли отправить модели фотографию документа или запись разговора вместо того, чтобы сначала перепечатывать их вручную.

Где смотреть на сайте

Термин встречается в объяснениях к таблицам и в методике проекта.

Другие термины

Токен · Входные и выходные токены · Кэширование запроса · Стоимость задачи · Контекстное окно · Потерянная середина · Поиск по своим документам · Выдумка модели