Автоматическое реферирование веб-документов с учетом запроса

Abstract

В отчете описаны принципы функционирования экспериментальной системы реферирования Веб-документов. В системе используется восходящий к работам 1950-60-х годов подход к выделению важных предложений (sentence extraction) с небольшими модификациями. Приводятся примеры работы системы, оценка ее производительности. Описаны эксперименты по оценке качества работы системы. Предварительные результаты позволяют говорить о приемлемом качестве реферирования. Предложенный подход может быть эффективно реализован в современных информационно-поисковых системах, если поисковый индекс хранит позиции слов с привязкой к предложениям.

This report describes basic principles and implementation of an experimental summarization system for Web documents. The system employs a sentence extraction approach dated back to the 50-60s, with minor modifications. Sample summaries and system performance estimates are presented. Different frameworks for summarization evaluation are described. Preliminary results prove acceptable quality of the obtained summaries. The proposed approach can be effectively implemented in a modern information retrieval system if the search index stores word positions related to the sentence level.