Towards the Tactile Discovery of Cultural Heritage with Multi-approach Segmentation
| Autor: | Ali Souradi, Christele Lecomte, Katerine Romeo, Simon Gay, Marc-Aurele Riviere, Abderrahim El Moataz, Edwige Pissaloux |
|---|---|
| Přispěvatelé: | Laboratoire d'Informatique, de Traitement de l'Information et des Systèmes (LITIS), Institut national des sciences appliquées Rouen Normandie (INSA Rouen Normandie), Institut National des Sciences Appliquées (INSA)-Normandie Université (NU)-Institut National des Sciences Appliquées (INSA)-Normandie Université (NU)-Université de Rouen Normandie (UNIROUEN), Normandie Université (NU)-Université Le Havre Normandie (ULH), Normandie Université (NU), Equipe Systèmes de Transport Intelligent (STI - LITIS), Normandie Université (NU)-Institut national des sciences appliquées Rouen Normandie (INSA Rouen Normandie), Groupe de Recherche en Informatique, Image et Instrumentation de Caen (GREYC), Centre National de la Recherche Scientifique (CNRS)-École Nationale Supérieure d'Ingénieurs de Caen (ENSICAEN), Normandie Université (NU)-Normandie Université (NU)-Université de Caen Normandie (UNICAEN), Projet Tremplin RIN Recherche: Guide Muséal, un dispositif numérique portable permettant une découverte tactile de la broderie de Bayeux, pour voyants et Personnes Présentant une Incapacité visuelle., Abderrahim El Moataz, Driss Mammass, Alamin Mansouri, Fathallah Nouboud |
| Jazyk: | angličtina |
| Rok vydání: | 2020 |
| Předmět: |
Computer science
Visually impaired visual impairment 02 engineering and technology Texture (music) déficience visuelle [SPI]Engineering Sciences [physics] ACM: H.: Information Systems Human–computer interaction 11. Sustainability 0202 electrical engineering electronic engineering information engineering Segmentation [INFO]Computer Science [cs] Affordance image segmentation Haptic technology héritage culturel interface haptique 020207 software engineering Image segmentation cultural heritage haptic interface segmentation d'image Comprehension Cultural heritage Accessibilité aux oeuvres d'art Accessibility to artworks 020201 artificial intelligence & image processing |
| Zdroj: | Image and Signal Processing Abderrahim El Moataz, Driss Mammass, Alamin Mansouri, Fathallah Nouboud. Image and Signal Processing, 12119, Springer International Publishing, pp.14-23, 2020, Lecture Notes in Computer Science, ⟨10.1007/978-3-030-51935-3_2⟩ Lecture Notes in Computer Science ISBN: 9783030519346 ICISP |
| Popis: | International audience; This paper presents a new way to access visual information inmuseums through tactile exploration, and related techniques to efficientlytransform visual data into tactile objects. Accessibility to cultural heritage andartworks for people with visual impairments requires the segmentation ofimages and paintings to extract and classify their contents into meaningfulelements which can then be presented through a tactile medium. In this paper,we investigate the feasibility and how to optimize the tactile discovery of animage. First, we study the emergence of image comprehension through tactilediscovery, using 3D-printed objects extracted from paintings. Later, we presenta dynamic Force Feedback Tablet (F2T) used to convey the 2D shape andtexture information of objects through haptic feedback. We then explore severalimage segmentation methods to automate the extraction of meaningful objectsfrom selected artworks, to be presented to visually impaired people through theF2T. Finally, we evaluate how to best combine the F2T’s haptic effects in orderto convey the extracted objects and features to the users, with the aim offacilitating the comprehension of the represented objects and their affordances.; Ce papier présente une nouvelle façon d'accéder à l'information visuelle dans les musées à travers l'exploration tactile et les techniques relatives à la transformation efficace des données visuelles en objets tactiles. L'accessibilité à l'héritage culturel et aux œuvres d'art pour les personnes présentant des incapacités visuelles nécessite la segmentation des images et des peintures pour extraire et classifier leur contenu en éléments portant un sens qui peuvent être présentés tactilement. Dans ce papier, nous recherchons la faisabilité et l'optimisation d'une découverte tactile d'une image. Dans un premier temps, nous étudions l'émergence de la compréhension d'images par le toucher à l'aide d'objets imprimés en 3D extraits de peintures. Plus tard, nous présentons une tablette à retour de force dynamique (F2T) utilisée pour transmettre la forme 2D et la texture des objets grâce à la rétroaction haptique. Nous explorons ensuite plusieurs méthodes de segmentation d'images pour automatiser l'extraction d'éléments significatifs d'œuvres d'art sélectionnées, à présenter aux personnes malvoyantes à travers la tablette F2T. Enfin, nous évaluons comment combiner au mieux les effets haptiques de F2T afin de transmettre aux utilisateurs les éléments et leurs caractéristiques extraites, dans le but de faciliter la compréhension des objets représentés et leur présentation de façon intuitive. |
| Databáze: | OpenAIRE |
| Externí odkaz: |
|