VENISE : projet CoRSAIRe

CoRSAIRe

Combinaisons de Rendus Sensori-moteurs pour l’Analyse Immersive de Résultats

Combination of sensori-motor rendering for the immersive analysis of results

Projet du programme ANR MDMSA 2005

Partenaires : LIMSI-CNRS, IRCAM-CNRS, EBGM-INSERM, ECI - Université Paris 5, HAPTION SA

Résumé :

Le projet CoRSAIRe se propose d’étudier une nouvelle approche pour l'exploration et l'analyse avancée de masses de données scientifiques à l’aide de systèmes de Réalité Virtuelle. Cette approche complexe exige de lancer des recherches sur plusieurs problématiques. Notre propos n’est pas la génération des données brutes, mais vise essentiellement leur mise en forme pour permettre leur étude en situation immersive et interactive. Les deux problèmes clés de ce type de traitement sont d’une part la transmission et la synchronisation des données entre plusieurs calculateurs dédiés, puis le rendu de ces données et l'exploration proprement dite en interaction multi-sensorielle avec l'utilisateur.

Les solutions envisagées visent la mise en oeuvre d'un environnement virtuel non seulement immersif, mais aussi multimodal, c'est-à-dire combinant les trois canaux sensori-moteurs que sont le visuel, l'audio et l'haptique. Cet environnement nécessite :

- une architecture matérielle permettant la distribution et la synchronisation des données et des calculs ainsi que la gestion physique des différents canaux sensori-moteurs ;

- des concepts d’interactions et leurs réalisations logicielles pour l'utilisation optimale des différentes modalités ;

- des tests et des validations de ces moyens dans deux domaines applicatifs auxquels participent les différentes équipes : la Bioinformatique Structurale et la Mécanique des Fluides.

Ce projet s’appuie sur l’expérience et la complémentarité des partenaires du consortium tant dans le domaine des interactions immersives que dans celui des applications visées.

Mots clefs : Réalité Virtuelle, Supervision multimodale, Haptique, Audio 3d, Mécanique des Fluides, Bioinformatique, Ergonomie cognitive.

Abstract:

The goal of the CoRSAIRe project is to develop new ways of interacting with large or complex digital worlds. The project aims at significantly enhancing currently existing interfaces by introducing multiple sensori-motor channels, so that the user will be able to see, hear and touch the data itself (or objects derived from the data), thus redefining completely conventional interaction mechanisms.

Obviously, such a research effort involves a paradigm shift, because many well-established visualization-oriented software packages exist to analyse the large spectrum of available data types: thus, creating a completely innovative sensori-motor interface would seem a daunting task. The proposal will focus on two well-defined application areas where partners already possess a high degree of expertise. This includes researchers from the fields of Fluids Mechanics and Bio-informatics, who manipulate massive and complex dynamic databases on a daily basis, with intricate, non-linear exploration scenarios.

Stemming from an in-depth confrontation between current observation methods in these fields and existing, state-of-the-art Virtual Environment Interaction techniques (originating from the partners themselves), new interaction concepts, paradigms and solutions will be designed and tested on real-world cases. Such an effort is inherently interdisciplinary, and will gather experts from Virtual Reality with knowledge in distributed computing, graphics, audio and haptics, together with application specialists. Beyond the specific testbeds developed during the timeframe of the project, the long term goal of the project is to examine how to combine multiple input/output channels to enable a better understanding of numerical data in general, and propose new interaction techniques for future applications.

Keywords: Virtual Reality, Multimodal supervision, Haptics, 3D audio, CFD, Bioinformatics, Ergonomics.

Vidéos des démonstrateurs :

Application CoRSAIRe / BioInfo	Application CoRSAIRe / MécaFlu

Documents d’avancement du projet :

· Rapport scientifique de « pré-audit »

· Transparents de l’audit du 13 novembre 2008

Chercheurs impliqués dans le projet :

LIMSI-CNRS

Patrick BOURDOT (resp. du projet)

Brian KATZ

François LUSSEYRAN

Christine MARTIN

Bob MENELAS

Luc PASTUR

Alex TEX

Jean-Marc VEZIEN

IRCAM-CNRS

Lorenzo PICINALI

Olivier WARUSFEL (resp. partenariat)

EBGM-INSERM

Ludovic AUTIN

Catherine ETCHEBEST (resp. partenariat)

ECI-Université Paris V

Jean-Marie BURKHARDT (resp. partenariat)

HAPTION SA

Youcef BERRABAH

Arnaud GENESLAY

Jérôme PERRET (resp. partenariat)

Collaborateurs extérieurs

Guillaume BOUYER (MdC à l’IBISC, Evry)

Nicolas FEREY (Post-doctorant à l’IBPC, Paris)

Julien NELSON (doctorant LCPI/ENSAM, Paris)

Anciens collaborateurs

Mehdi AMMI

Abdelhamid DRIF

Rachid GHERBI

_______________