Segmentação de vídeo em cenas por fusão prévia multimodal

Resumo: 

 

A segmentação temporal de vídeo em cenas é um pré-requisito de várias tarefas da Recuperação de Informação Multimídia, como a sumarização de vídeo, recuperação de vídeo baseada em conteúdo e recomendação de vídeo. Não há, entretanto, um método satisfatório para segmentar vídeo em cenas automaticamente. Os métodos de segmentação de vídeo em cenas em estado da arte são multimodais, correspondendo à natureza multimodal do vídeo. Apesar da disponibilidade de métodos multimodais de segmentação em cenas, pouca investigação foi encontrada na literatura sobre o uso de fusão prévia para essa tarefa. A fusão prévia é conhecida por ser útil em tarefas relacionadas onde uma potencial correlação entre diferentes modalidades é descoberta antes do passo principal de processamento, aumentando a eficácia e reduzindo custos computacionais. Nessa palestra, será apresentado o trabalho realizado no desenvolvimento de uma técnica de fusão prévia multimodal para o problema de segmentação temporal de vídeo em cenas. Além disso, será discutida a aplicação desta técnica de fusão prévia de características em outro problema da área de Recuperação de Informação Multimídia.