MSMatthieu Perreira Da Silva

Matthieu Perreira Da Silva

*This is an algorithmically generated author record based on publicly available information.

Current Organizations / Institutes

The organizations/institutes from the scholar's latest article

Previous Organizations / Institutes

The organizations / institutes from the scholar's other articles in the past ten years


Matthieu Perreira Da Silva has a total of 94 co-authors. Here are the top co-authors by number of shared publications:


Latest Publications

  • Modèle computationnel d'attention pour la vision adaptative

    by Matthieu Perreira da Silva

    L'analyse temps réel de la masse de données générée par les mécanismes de gestion de la vision dans les applications interactives est un problème toujours ouvert, promettant des avancées importantes dans des domaines aussi variés que la robotique, l’apprentissage à distance ou les nouvelles formes d’interactions avec l’utilisateur, sans clavier ni souris. Dans le cadre général de la vision, les algorithmes d’analyse de scène doivent trouver un compromis entre d'une part la qualité des résultats recherchés et d'autre part la quantité de ressources allouable aux différents tâches. Classiquement, ce choix est effectué à la conception du système (sous la forme de paramètres et d’algorithmes prédéfinis), mais cette solution limite le champ d’application de celui-ci. Une solution plus flexible consiste à utiliser un système de vision adaptatif qui pourra modifier sa stratégie d’analyse en fonction des informations disponibles concernant son contexte d’exécution. En conséquence, ce système doit posséder un mécanisme permettant de guider rapidement et efficacement l’exploration de la scène afin d’obtenir ces informations. Chez l’homme, les mécanismes de l’évolution ont mis en place le système d’attention visuelle. Ce système sélectionne les informations importantes afin de réduire la charge cognitive et les ambiguïtés d’interprétation de la scène. Nous proposons, dans cette thèse, un système d'attention visuelle, dont nous définissons l’architecture et les principes de fonctionnement. Ce dernier devra permettre l’interaction avec un système de vision afin qu’il adapte ses traitements en fonction de l’intérêt de chacun des éléments de la scène, i.e. ce que nous appelons saillance. A la croisée des chemins entre les modèles centralisés et hiérarchiques (ex : [Koch1985], puis [Itti1998]), et les modèles distribués et compétitifs (ex : [Desimone1995], puis [Deco2004, Rolls2006]), nous proposons un modèle hiérarchique, compétitif et non centralisé. Cette approche originale permet de générer un point de focalisation attentionnel à chaque pas de temps sans utiliser de carte de saillance ni de mécanisme explicite d’inhibition de retour. Ce nouveau modèle computationnel d'attention visuelle temps réel est basé sur un système d'équations proies / prédateurs, qui est bien adapté pour l'arbitrage entre un comportement attentionnel non déterministe et des propriétés de stabilité, reproductibilité, et réactivité. L'analyse des expérimentations menées est positive : malgré le comportement non-déterministe des équations proies / prédateurs, ce système possède des propriétés intéressantes de stabilité, reproductibilité, et réactivité, tout en permettant une exploration rapide et efficace de la scène. Ces propriétés ouvrent la possibilité d’aborder différents types d’applications allant de l’évaluation de la complexité d’images et de vidéos à la détection et au suivi d’objets. Enfin, bien qu’il soit destiné à la vision par ordinateur, nous comparons notre modèle au système attentionnel humain et montrons que celui-ci présente un comportement aussi plausible (voire plus en fonction du comportement défini) que les modèles classiques existants.

  • Adding Touch to Immersive Media: An Overview of the MPEG Haptics Coding Standard

    by Philippe Guillotel, Yeshwant Muthusamy, Quentin Galvane, Eric Vezzoli, Lars Nockenberg, Iraj Sodagar, Henry Da Costa, Alexandre Hulsken, Gurvan Lecuyer, Matthieu Perreira Da Silva, et al.

    In May 2021, MPEG issued a call for proposals for the specification of a new coding format for haptic data. Following this call, a baseline reference design and associated software implementation were defined for the representation and coding of haptic data. It resulted in a standard that defines a complete generic framework for the delivery of haptic signals, allowing the development of current and future haptic applications in the mobile, gaming, and virtual reality domains. This paper introduces the results of the first phase of the MPEG haptics coding standard. It includes the description of the codec architecture, the current performances in terms of compression efficiency, and the plans for the coding representation and distribution of haptics. The publication of the final ISO international standard is expected in 2024


  • A Conceptual Framework for Immersive Behavioral Data Exploration Assisted by a Deep Learned Representation of Data

    by Victor Duvivier, Matthieu Perreira Da Silva, Yannick Prié

    By allowing to conduct experiments involving eco-logically valid tasks within controlled environments, Virtual Real-ity (VR) offers novel opportunities for studying human behavior. Several modalities can be leveraged, including event logs, motion trajectories, eye-tracking data, or physiological signals. However, analyzing such multimodal data presents considerable challenges due to their inherent complexity, the varied structures they imply, as well as the necessity to use exploratory approaches. There is therefore a need to design visual analytics tools for the exploration of immersive behavioral data without prior knowledge. Our idea is to integrate deep learned computational models -which leverage advanced techniques to extract valuable high-level features from unlabeled data- into exploratory Visual Analytics tools. We introduce a conceptual framework for integrating deep learning models into the Visual Analytics process of immersive behavioral data analysis, also focusing on the services that such systems should provide to the analysts.

  • Open Access

    Editorial: Psychological and cognitive evaluation and intervention based on physiological and behavioral computing

    by Lin Shu, Matthieu Perreira Da Silva, Lulu Zhang, Chee-Kong Chui

    Editorial: Psychological and cognitive evaluation and intervention based on physiological and behavioral computing

  • Open Access

    Personalized Visual Scanpath Prediction Using IOR-ROI Weighted Attention Network

    by Feng Yuan, Matthieu Perreira Da Silva, Alexandre Bruckert

    Predicting visual scanpaths plays an important role in modeling overt human visual attention and search behavior. Due to the rapid development of deep learning, previous scanpath prediction models have made significant progress. However, these methods only focus on common visual saliency, while ignoring differences in observational traits between individuals. Therefore, we propose a more challenging task, which is to provide personalized scanpath prediction for different subjects. In response to the above tasks, we designed a personalized scanpath prediction model with two branches. Specifically, we use the visual hit branch to realize the interaction between multiple features, obtain high-dimensional features with rich subject information, and standardize the appearance location of fixations at the same time. Then, weighted attention in scanpath prediction branch fuses image embedding and subject embedding to obtain an ROI map more similar to the observed characteristics of the subject using high-dimensional features obtained from the visual hit branch.


  • Open Access

    LLM-Based Interaction for Content Generation: A Case Study on the Perception of Employees in an IT Department

    by Alexandre Agossah, Frédérique Krupa, Matthieu Perreira Da Silva, Patrick Le Callet


  • Open Access

    A Dataset of Gaze and Mouse Patterns in the Context of Facial Expression Recognition

    by Alexandre Bruckert, Lucie Lévêque, Matthieu Perreira Da Silva, Patrick Le Callet


  • Open Access

    The Salient360! Toolbox: Processing, Visualising and Comparing Gaze Data in 3D

    by Erwan David, Jesús Gutiérrez, Melissa Le-Hoa Vo, Antoine Coutrot, Matthieu Perreira Da Silva, Patrick Le Callet

    Eye tracking can serve as a gateway to studying the mind. For this reason it has been adopted by a diverse range of scientific communities. With the improvement of the quality of head-mounted virtual reality devices (HMDs) over the past 10 years, eye tracking has been added to capture gaze in immersive environments. The use of HMDs with eye tracking is increasing significantly and so is the need for a toolbox enabling consensus about eye tracking methods in 3D. We present the Salient360! toolbox: it implements functions to identify saccades and fixations and output gaze characteristics (e.g., fixation duration or saccade directions), to generate saliency maps, fixation maps, and scanpath data. It also implements routines made to compare gaze data that were adapted to 3D. We hope that this toolbox will spark discussions about the methodology of 3D gaze processing, facilitate running experiments, and improve the gaze study in 3D. https://github.com/David-Ef/salient360Toolbox