Система реферування мультимодальної інформації

Abstract

Розглянуто процес реферування мультимодальної інформації. Тобто початкова інформація може представлятися у вигляді тексту, зображення, аудіо або відео. Пропонується модель процесу реферування, поліпшена за рахунок введення додаткового етапу, що дозволяє обробляти мультимодальну інформацію. Наводяться алгоритм функціонування системи реферування на цьому етапі та модель процесу перетворення початкового документа у внутрішній формат системи.

Рассмотрен процесс реферирования мультимодальной информации. То есть исходная информация может представляться в виде текста, изображения, аудио или видео. Предлагается модель процесса реферирования, улучшенная за счёт введения дополнительного этапа, позволяющего обрабатывать мультимодальную информацию. Приводятся алгоритм функционирования системы реферирования на этом этапе и модель процесса преобразования исходного документа во внутренний формат системы.

This paper considers the process of multimodal information summarization. Input information can appear as a text, image, audio or video. There had been suggested the model of summarization process, improved by introducing of the additional stage, which allows to process multimodal information. The algorithm of the summarization system functioning on mentioned stage and model of transformation process of input document to the system's internal format had also been described.