1 / 24

Artis-GRAVIR/IMAG, Grenoble, Jean-Marc Hasenfratz LIRIS, Lyon, Saida Bouakaz

CYBER-II Capture, reconstruction et incrustation en temps réel d’un animateur dans un monde virtuel. Artis-GRAVIR/IMAG, Grenoble, Jean-Marc Hasenfratz LIRIS, Lyon, Saida Bouakaz MOVI-GRAVIR/IMAG, Grenoble, Edmond Boyer APACHE/ID, Grenoble, Bruno Raffin

kasie
Télécharger la présentation

Artis-GRAVIR/IMAG, Grenoble, Jean-Marc Hasenfratz LIRIS, Lyon, Saida Bouakaz

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. CYBER-IICapture, reconstruction et incrustation en temps réel d’un animateur dans un monde virtuel Artis-GRAVIR/IMAG, Grenoble, Jean-Marc Hasenfratz LIRIS, Lyon, Saida Bouakaz MOVI-GRAVIR/IMAG, Grenoble, Edmond Boyer APACHE/ID, Grenoble, Bruno Raffin D. Cobzas, JS Franco, JD Gascuel, E. Guillou, JC Iehl, M. Lapierre, S. Maad, C. Menier, B. Péroche, P. Sturm

  2. Description du projet • But : Capture, reconstructionet incrustationen temps réeld’un animateur dans un monde virtuel

  3. Intérêts & applications • Studio virtuel pour chaîne de télé • Visite virtuelle dans des mondes réels ou imaginaires • Vulgarisation scientifique style palais de la découverte • Jeux vidéo • …

  4. Plan • Décortiquer les problèmes à partir de différentes applications existantes • Contraintes pour arriver à nos fins • Résultats

  5. Présentation de la météo

  6. Pb 1 : Fond BLEU ou VERT

  7. Pb 2 : Ombres portées

  8. Pb 2 : Ombres portées

  9. Pb 2 : Ombres portées

  10. Pb 3 : Cohérence des couleurs

  11. Pb 3 : Cohérence des couleurs Vidéo Thalassa 52’’

  12. Pb 4 : Interaction • Interaction avec le publique • Interaction avec les objets virtuels • Réaction instantanée (temps réel) • Projection sur écran haute résolution Palais de la découverte – ParisL’électromagnétisme

  13. Pb 4 : Interaction

  14. Pb 5 : Posture de l’animateur • Trouver un modèle articulé de l’animateur

  15. Contraintes • Fond quelconque • Réalisme de l’incrustation • Ombres • Interactions lumineuses • Point de vue quelconque • Interaction • Avec le public (aucun capteurs) • Interaction avec le monde virtuel (reconnaître les gestes) • Temps réel • Visualisation sur écran à très haute résolution

  16. Description du projet

  17. Infrastructure matérielle

  18. Résultat : fond quelconque

  19. Parallélisation • Reconstruction en 3 étapes ci-dessous • Structure de pipeline avec un étage par étape • Parallélisation interne à chaque étape: découpage spatial de taches concurrentes

  20. Parallélisation : grappe de PC • Augmentation du débit (30 images/secondes vs 1 image/seconde en séquentiel) • Réduction de la latence de 1s à 100ms • Implémentation avec 4 cameras Firewire, sur grappe de 11 bi-Xeon 2GHz, sur réseau gigabit, visualisation sur système multi-projecteurs

  21. Reconstruction et mur d’images 22’’

  22. Interaction : H-anim

  23. Résultats : interaction • Vidéo…

  24. En cours et à faire • Texturage omnidirectionnel • Terminer portage sous Linux • Reconnaissance du squelette • Rééclairage textures • …

More Related