Nokia présente le streaming adaptatif de splats gaussiens 3D dynamiques lors de MatchXR à Helsinki

Nokia se prépare à démontrer une avancée significative dans les technologies de médias immersifs lors du prochain événement MatchXR à Helsinki. L'entreprise présentera ses derniers travaux sur le streaming adaptatif de splats gaussiens 3D dynamiques, une technique permettant de créer des représentations volumétriques très réalistes de personnes, d'objets et d'environnements. Cette technologie permet aux spectateurs de vivre ces scènes de manière interactive en trois dimensions. Lors de la démonstration, les visiteurs pourront visionner du contenu vidéo volumétrique haute fidélité à travers des lunettes de réalité augmentée légères, marquant une étape vers des applications pratiques et réelles de cette méthode de rendu complexe.

L'innovation clé de cette démonstration réside dans la compression et le streaming efficaces de contenus 3D photoréalistes. Nokia utilise des technologies standardisées et des approches de streaming existantes pour garantir une transmission fluide des données sans exiger de bande passante excessive ni de puissance de traitement importante. L'objectif principal est de rendre les médias volumétriques aussi faciles à streamer et interopérables que la vidéo 2D traditionnelle l'est aujourd'hui. En atteignant ce niveau d'efficacité, les expériences immersives pourront fonctionner de manière transparente sur différents appareils et plateformes, ouvrant la voie à une adoption plus large et à une meilleure scalabilité dans le secteur.

La vidéo volumétrique offre un changement fondamental dans la façon dont les utilisateurs interagissent avec le contenu numérique en supprimant la limitation d'une perspective de caméra fixe. Au lieu d'un seul point de vue, la technologie capture les sujets en trois dimensions, permettant aux spectateurs de les explorer sous divers angles. Cette capacité ouvre la voie à des scénarios d'application variés dans plusieurs secteurs. Dans les environnements industriels, les experts peuvent démontrer des procédures complexes, permettant aux stagiaires de les observer depuis différents points de vue. Dans les domaines de la santé et de l'éducation, elle facilite un enseignement et des simulations plus immersifs. Les applications grand public incluent la possibilité de vivre des événements sportifs comme si on y était, d'explorer des sites du patrimoine culturel ou de visualiser des produits en 3D détaillée.

Le seuil d'entrée pour la création et la consommation de contenu volumétrique a considérablement baissé grâce aux récents développements technologiques. Bien que les expériences dynamiques de haute qualité nécessitent encore des systèmes de capture dédiés et des flux de travail spécialisés, le contenu de base peut désormais être généré à l'aide de smartphones et d'outils d'IA. Cela reflète l'évolution de la production de vidéo 2D, où les studios professionnels coexistent avec le contenu créé par les consommateurs. L'IA joue un rôle crucial dans ce processus, en aidant à générer des modèles 3D à partir d'entrées limitées, à reconstruire précisément les scènes et à réduire le besoin d'équipements de capture étendus. De plus, l'IA contribue à un traitement, une compression et un streaming plus efficaces des données 3D, permettant potentiellement à n'importe qui de créer une vidéo volumétrique dynamique de haute qualité grâce à de simples prompts ou à des entrées vidéo 2D.

L'implication de Nokia dans ce domaine est soutenue par des initiatives écosystémiques plus larges en Finlande, qui a fait des progrès significatifs dans la construction d'un écosystème de métavers collaboratif. Le programme Nokia Veturi Industrial Metaverse LEAD connecte plus de 200 partenaires à travers des projets de co-innovation, en se concentrant sur des domaines tels que la XR, la connectivité avancée et les applications pilotées par l'IA. Cette approche collaborative met l'accent sur les applications industrielles, les technologies centrées sur l'humain et la durabilité, passant du hype à la mise en œuvre pratique. En apportant des technologies fondamentales et en assurant un leadership dans l'écosystème, Nokia vise à accélérer la transition de la recherche vers des applications industrielles pratiques, garantissant que les technologies immersives deviennent une partie standard de l'infrastructure numérique.