Détection temporelle de saillance dynamique dans des vidéos par apprentissage profond

Autor: Maczyta, Léo, Bouthemy, Patrick, Le Meur, Olivier
Přispěvatelé: Space-timE RePresentation, Imaging and cellular dynamics of molecular COmplexes (SERPICO), Inria Rennes – Bretagne Atlantique, Institut National de Recherche en Informatique et en Automatique (Inria)-Institut National de Recherche en Informatique et en Automatique (Inria), Computational Visual Perception and Applications ( PERCEPT), MEDIA ET INTERACTIONS (IRISA-D6), Institut de Recherche en Informatique et Systèmes Aléatoires (IRISA), Université de Bretagne Sud (UBS)-Institut National des Sciences Appliquées - Rennes (INSA Rennes), Institut National des Sciences Appliquées (INSA)-Université de Rennes (UNIV-RENNES)-Institut National des Sciences Appliquées (INSA)-Université de Rennes (UNIV-RENNES)-Institut National de Recherche en Informatique et en Automatique (Inria)-École normale supérieure - Rennes (ENS Rennes)-Centre National de la Recherche Scientifique (CNRS)-Université de Rennes 1 (UR1), Université de Rennes (UNIV-RENNES)-CentraleSupélec-IMT Atlantique Bretagne-Pays de la Loire (IMT Atlantique), Institut Mines-Télécom [Paris] (IMT)-Institut Mines-Télécom [Paris] (IMT)-Université de Bretagne Sud (UBS)-Institut National des Sciences Appliquées - Rennes (INSA Rennes), Institut Mines-Télécom [Paris] (IMT)-Institut Mines-Télécom [Paris] (IMT)-Institut de Recherche en Informatique et Systèmes Aléatoires (IRISA), Institut Mines-Télécom [Paris] (IMT)-Institut Mines-Télécom [Paris] (IMT), Computational Visual Perception and Applications (PERCEPT), Université de Rennes (UR)-Institut National des Sciences Appliquées - Rennes (INSA Rennes), Institut National des Sciences Appliquées (INSA)-Institut National des Sciences Appliquées (INSA)-Université de Bretagne Sud (UBS)-École normale supérieure - Rennes (ENS Rennes)-Institut National de Recherche en Informatique et en Automatique (Inria)-CentraleSupélec-Centre National de la Recherche Scientifique (CNRS)-IMT Atlantique (IMT Atlantique), Institut Mines-Télécom [Paris] (IMT)-Institut Mines-Télécom [Paris] (IMT)-Université de Rennes (UR)-Institut National des Sciences Appliquées - Rennes (INSA Rennes)
Jazyk: francouzština
Rok vydání: 2018
Předmět:
Zdroj: RFIAP 2018-Reconnaissance des Formes, Image, Apprentissage et Perception
RFIAP 2018-Reconnaissance des Formes, Image, Apprentissage et Perception, Jun 2018, Marne-la-Vallée, France. pp.1-8
Popis: National audience; We address the problem of motion saliency in videos. More precisely, we aim to determine at each time step if an image can be classified as salient or not according to its motion content. An image will be detected as salient if it contains objects whose motion departs from its spatio-temporal context. The proposed approach handles situations with a mobile camera and involves a deep learning stage. Several variants are proposed and compared. Temporal saliency detection is relevant for applications that require to trigger alerts or to monitor dynamic behaviours from videos. Experiments on real videos demonstrate that the proposed methods can provide accurate classification.; Le problème étudié concerne l'analyse de la saillance dynamique dans des vidéos. Plus précisément, nous cherchons à chaque instant à déterminer si une image peut être classée comme saillante ou non selon des informations liées au mouvement dans l'image. Une image sera détectée comme saillante si elle contient des éléments dont le mouvement se démarque de son contexte spatio-temporel. L'approche proposée traite les cas où la caméra est en mouvement et utilise l'apprentissage profond. Plusieurs variantes en sont proposées et comparées. La détection temporelle est pertinente pour de nombreuses applications où une alerte ou une attention particulière doit être déclenchée en rapport avec le contenu dynamique des vidéos. Des expérimentations sur une base de vidéos réelles variées montrent la très bonne précision de classification obtenue.
Databáze: OpenAIRE
Externí odkaz: