Sumarização automática multivídeo baseada em estratégias humanas

Autor: Tamires Tessarolli de Souza Barbieri
Přispěvatelé: Rudinei Goularte, Thiago Alexandre Salgueiro Pardo, Debora Christina Muchaluat Saade, Celso Alberto Saibel Santos
Rok vydání: 2021
Zdroj: Biblioteca Digital de Teses e Dissertações da USP
Universidade de São Paulo (USP)
instacron:USP
Popis: Nos últimos anos, o volume de dados multimídia produzidos e disponíveis para acesso tem crescido contínua e rapidamente. Esse contexto agravou o problema da sobrecarga de informação: encontrar conteúdo de interesse em meio à grande quantidade de opções disponíveis, tornando essenciais sistemas que possibilitem acesso eficiente. A sumarização de vídeo é uma área de pesquisa que busca lidar com esse problema, fornecendo uma versão compacta e informativa do conteúdo. Em particular, os sistemas multimídia atuais disponibilizam diversos vídeos relacionados ao mesmo assunto, contendo informações complementares. Esse fato ressalta a importância da sumarização multivídeo para lidar com o interesse do usuário em se informar sobre determinado assunto a partir de um conjunto de vídeos que o abordam, sem a necessidade de assistir a todos eles. Entretanto, a análise da literatura mostra que estratégias humanas não são consideradas na definição dos critérios utilizados para selecionar automaticamente os segmentos de vídeo que irão compor os sumários e o foco das técnicas tem sido a identificação de informações que se repetem em diferentes vídeos. Assim, esta tese tem o objetivo de investigar se critérios para seleção de conteúdo derivados de estratégias humanas são capazes de produzir resultados semanticamente mais relevantes na visão do usuário. A pesquisa desenvolvida evidencia que a abordagem proposta possibilitou mapear os julgamentos de relevância dos usuários e gerar sumários multivídeo mais próximos a suas expectativas In the last years, the multimedia data volume produced and available for access has increased continuous and quickly. This context has also increased the overload information problem: find content of interest in the huge amount of available options, making essential systems that allow efficient access. Video summarization is a research field that deals with this problem, providing a compact and informative version of the content. In particular, current multimedia systems make available several videos related to the same subject, having complementary information. This fact highlights the importance of multi-video summarization to deal with users interest in being informed about a specific subject from a set of videos, without the need of watching all of them. However, the literature analysis shows that human strategies are not considered to define criteria used to automatically select video segments that will compose a summary and the focus of techniques has been the identification of common information in different videos. Therefore, this thesis aims to investigate if criteria for content selection derived from human strategies are able to produce results semantically more relevant in users view. The developed research evidences that the proposed approach made it possible to map users relevance judgments and generate multi-video summaries closer to their expectations.
Databáze: OpenAIRE