Une nouvelle technologie pour les médias du futur

Des images animées dans le journal comme dans Harry Potter, ou des prévisions météo numériques dans le dialecte bernois? Les nouvelles technologies des médias transforment le journalisme. Le Media Technology Center de l'ETH Zurich accompagne les entreprises médiatiques sur leur chemin vers l'avenir.

Dans le monde magique du petit sorcier Harry Potter, toutes sortes de choses sont possibles – par exemple, dans le Daily Prophet, le journal des sorcières et des sorciers, les personnages illustrés bougent comme ils le font dans la vie réelle.

Naturellement, vous ne le trouverez pas encore dans le monde réel. Mais la technologie des médias modernes s'en rapproche de plus en plus. Au Media Technology Center (MTC) de l'ETH Zurich, par exemple, des étudiants et des chercheurs travaillent sur un "papier augmenté", qui permettrait à quiconque possédant une paire de lunettes spéciales, appelées lunettes de réalité augmentée ou lunettes AR, de voir réellement images animées sur la page, comme dans Harry Potter. «Il est fort possible que ces lunettes soient bientôt assez petites pour que nous puissions les porter toute la journée», explique Severin Klingler, directeur général de MTC. "Ensuite, nous verrons comment le contenu numérique et le contenu réel peuvent être mélangés dans un" papier augmenté "."

Harry Potter entre à l'école – une vidéo pour le journal

Le «papier augmenté» que les chercheurs de l'ETH développent actuellement combine les avantages d'un journal traditionnel en papier avec les avantages du contenu numérique. "Vous tenez le papier dans vos mains comme d'habitude, mais lorsque vous le lisez à l'aide des lunettes AR, les images et les mots changent", explique Klingler.

Par exemple, dans une image sous le titre "Début de l'école pour les sorcières et les sorciers", vous voyez un train à vapeur émerger. À l'avenir, cette technologie pourrait être utilisée pour intégrer des vidéos d'événements réels dans le journal, comme l'incendie annuel du Böögg au festival Sechseläuten à Zurich. "Ce qui est nouveau dans notre technologie, c'est la façon dont les images animées sont toujours affichées correctement même lorsque les pages du papier se plient lorsqu'elles sont retournées", explique Klingler.

MTC poursuit un objectif très pratique avec son projet de lunettes AR dans le centre-ville de Zurich. Quiconque regarde Paradeplatz avec des lunettes AR verra des informations locales telles que les heures de départ du tramway, des affiches publicitaires pour les magasins environnants ou des articles de journaux sur les deux principales banques qui s'y trouvent. L'accent est mis sur les questions de lisibilité pratique: où et quand une affiche publicitaire est-elle affichée? Où sont affichés les articles? Quelles surfaces conviennent aux écrans?

Un dinosaure se promenant dans Zurich

"Par-dessus tout, MTC se préoccupe de la manière la plus simple possible de générer ces nouveaux types de contenu numérique pour les médias", explique Klingler. En utilisant l'outil de MTC, il est facile d'agrandir Paradeplatz avec des personnages virtuels, en le transformant en zoo ou en monde sous-marin, par exemple. "Tout ce que quelqu'un crée en réalité virtuelle apparaît automatiquement sur la vraie Paradeplatz", explique Klingler. "Notre outil signifie que les utilisateurs n'ont plus à se débattre avec la difficile question de savoir comment placer leur contenu virtuel au bon endroit. Ils peuvent simplement se concentrer sur la conception."

L'un des défis techniques, pour lequel il n'existe pas encore de solution simple, est la "gestion de l'occlusion": contrairement à un film réalisé pour le cinéma, qui est monté en studio, les personnages virtuels évoluant en temps réel dans une situation réelle ne parviennent souvent pas à disparaître de la vue immédiatement lorsqu'un utilisateur tourne un coin de la rue. Cela perturbe la crédibilité de l'expérience visuelle.

Les chercheurs de l'ETH ont mis au point une approche qui rend ce travail plus efficace: par exemple, un dinosaure virtuel errant près de l'arrêt de tramway sur la Stampfenbachplatz disparaît maintenant immédiatement comme dans la vie réelle alors qu'il tourne le coin du centre des médias du canton de Zurich. Les chercheurs de l'ETH ont utilisé un modèle 3D de la ville de Zurich pour y parvenir.

Météo locale dans les dialectes locaux

Outre les images animées virtuelles, les assistants vocaux sont susceptibles de devenir de plus en plus importants dans notre utilisation quotidienne des médias. La tendance de la technologie des médias indique que le contenu des médias tels que les vidéos, les actualités radio ou les textes sera récupéré moins à la main – en cliquant, en tapant ou en glissant – et plus fréquemment par la voix. Nous connaissons déjà les assistants intelligents des applications de fitness ou des prévisions de trafic sur nos smartphones.

"Mais aucun des assistants disponibles aujourd'hui ne parle ou ne comprend les dialectes suisses, ce qui rend la communication avec eux plutôt peu naturelle pour les Suisses", explique Klingler. C'est pourquoi MTC développe un assistant vocal qui parle suisse allemand. Il parle couramment le "Bärndütsch", le dialecte de Berne, depuis 2019, et est actuellement étendu à d'autres dialectes.

Comme c'est caractéristique du travail du MTC, les chercheurs développent les assistants suisses allemands en partenariat avec une société de médias suisse. Dans ce cas, le partenaire est le principal réseau de radio et de télévision suisse, SRF. SRF publie de grandes quantités de contenu dans les dialectes locaux sur ses canaux. La technologie qui traduit le haut-allemand vers le suisse-allemand ou qui peut annoncer les nouvelles locales et les prévisions météorologiques dans le dialecte local est donc très pratique et confère au texte parlé automatiquement une authenticité régionale.

Accompagnement à la transformation numérique

Les projets de développement de MTC sont généralement mis en œuvre en un à deux ans et offrent des avantages pratiques aux rédactions et aux sociétés de médias. L'objectif est d'accompagner les entreprises médiatiques suisses dans leur transformation numérique. Cela s'applique à la fois à la génération de contenu journalistique et à la production de divers formats et méthodes de médias qui apportent du contenu numérique aux utilisateurs et personnalisent la consommation des médias.

Le Media Technology Center fait partie de l'initiative ETH media technology. Le centre a été créé en 2019 avec des partenaires de l'industrie des médias. Il est soutenu par les sociétés de médias Ringier, TX Group (anciennement Tamedia), SRG SSR, NZZ, Verband Schweizer Medien, l'association des employeurs et entrepreneurs de l'imprimerie suisse viscom et la Fondation ETH Zurich. Tous les partenaires – comme l'ETH Zurich – ont contribué financièrement à rendre le MTC possible. Le centre est toujours ouvert pour étendre ses partenariats. Le responsable scientifique du centre est le professeur d'informatique de l'ETH Markus Gross, qui est rejoint par des experts des secteurs commercial et scientifique.

Ouvert aux idées de projets médiatiques

"Nous sommes ouverts à toutes les idées de projets des sociétés de médias et des rédactions", a déclaré Klingler. Le MTC a commencé ses travaux en mars 2019 et comprend huit chercheurs, soutenus par des étudiants et des doctorants, dans les domaines de la vision par ordinateur, de l'infographie, du traitement naturel de la parole, des systèmes de recommandation, de la modélisation utilisateur et de l'apprentissage automatique. Ryan Cotterell travaille également à Zurich depuis février 2020. Le professeur d'informatique a été nommé dans le cadre de l'initiative de technologie des médias et combine la linguistique, le traitement automatique de la parole et l'intelligence artificielle.

Plus d'information:
Chalumattu R, Schaub-Meyer S, Wiethüchter R, Klingler S, Gross M. Simplifier le processus de création de scènes d'extérieur augmentées. Article accepté à la conférence internationale 2020 de l'IEEE sur les ateliers multimédia et expo