Research project

XRECO

XR mEdia eCOsystem

Europe

Tot i que les organitzacions de mitjans de comunicació donen suport cada vegada més a experiències no lineals per al consumidor, aquestes encara es limiten a canals i dominis de mitjans únics. Malgrat que diverses organitzacions de mitjans han aconseguit recentment trencar els compartiments estancs de dades, l’intercanvi de dades es limita principalment a l’organització.

XReco crearà un nou ecosistema basat en dades per a la indústria dels mitjans de comunicació, centrant-se a facilitar l’intercanvi de dades, la cerca i el descobriment, i a donar suport a la creació de continguts de notícies i entreteniment. El focus estarà en la creació i (re)utilització d’actius 2D i 3D relacionats amb la ubicació i en la creació d’experiències de XR (Realitat Estesa).

El nucli de l’ecosistema, representat per un Repositori de Mitjans Neurals (NMR), fomentarà l’intercanvi de contingut entre organitzacions i proporcionarà un major accés al contingut per als creadors de mitjans, considerant noves polítiques de monetització de dades i gestió de drets. Un conjunt de serveis de transformació de mitjans basats en IA es construeixen al voltant del NMR per produir noves experiències de mitjans i XR, incloent-hi reconstruccions neurals 3D, localització de dispositius basada en xarxes neurals, unió d’imatges, canvi d’il·luminació i holoportació.

Dins del projecte, i2CAT lidera el disseny, els requisits i les especificacions de la tecnologia XReco, incloent-hi els següents objectius:

Recollir, documentar i validar els requisits per a la tecnologia desenvolupada i els demostradors.
Disseny de l’arquitectura.
Desenvolupar les especificacions de l’API.
Garantir la integració del sistema.

La tecnologia desenvolupada es validarà en escenaris de casos d’ús per als mitjans de comunicació de notícies per a la radiodifusió basada en XR i la publicació automàtica i personalitzada de notícies a múltiples destinacions, i per a continguts d’informació i entreteniment basats en la ubicació, amb aplicacions que también funcionen en el turisme i la indústria de l’automoció.

XReco construirà una tecnologia habilitadora i aplanarà el camí per elevar l’ús de contingut multimèdia XR, passant de ser utilitzat ocasionalment en la producció de mitjans a ser integrat regularment en la indústria dels mitjans.

Impacte estimat

XReco té com a objectiu permetre l’intercanvi eficient de dades de mitjans, el seu descobriment, recomanacions, transformacions i la creació de nous continguts multimèdia. Mitjançant mitjans espacialment presents i l’intercanvi de dades entre organitzacions basat en tecnologies emergents entrellaçades (IA, blockchain, RV), XReco podrà aportar solucions innovadores a les tecnologies dels mitjans de comunicació, el turisme i la indústria de la mobilitat. Ingredients que tenen potencialment un impacte positiu a llarg termini en la ciència, la tecnologia, l’economia i el medi ambient europeus.

XReco proporcionarà una solució com un ecosistema integrat, amb l’objectiu d’apoderar el sector dels mitjans a Europa, així com els membres més petits de la indústria per igual. La plataforma lliurada estarà composta per un conjunt de tecnologies horitzontals i verticals; les primeres abordaran la visibilitat de les dades, la gestió de drets, la monetització i la previsualització, i les segones proporcionaran un conjunt de serveis de transformació de dades basats en solucions d’IA recents i pioneres que permeten la creació de contingut compatible amb XR amb un esforç mínim:

L’ecosistema de XReco proporcionarà incentius clars perquè la indústria dels mitjans participi en l’intercanvi de contingut multimèdia. Això s’aconseguirà lliurant una plataforma que estigui fortament enfocada en la gestió de drets. Amb aquesta finalitat, l’ecosistema de XRECO utilitzarà Contractes Legals Intel·ligents (SLC) i tecnologies blockchain per formalitzar els drets dels subjectes sobre els actius digitals i donar suport a la seva gestió, així com algoritmes de teoria de jocs per gestionar la monetització d’actius digitals derivats (inclosos models basats en dades i els seus productes/derivats) d’una manera FRAND (Justa, Raonable i No Discriminatòria).
XReco avançarà en l’estat actual de la Recuperació d’Informació (RI) desenvolupant una solució per al descobriment de contingut multimèdia basada en característiques de xarxes neuronals, utilitzant Adaptadors de Dades per transformar el contingut aportat a un model de dades comú i multimodal, descrit per Descriptors Neurals.
XReco permetrà la producció de notícies de pròxima generació, impulsada per la generació de cobertura de notícies actualitzada gairebé en temps real, utilitzant tècniques basades en IA i contingut generat per l’usuari.
Les solucions s’aprofitaran per a produccions de mitjans de notícies XR en directe i en diferit. El presentador de notícies serà teletransportat de l’estudi a una reconstrucció 3D d’una escena rellevant per a la notícia (p. ex., una zona de desastre, un concert o un esdeveniment esportiu), i la producció podrà mostrar aquest nou contingut generat des d’un nombre potencialment il·limitat de punts de vista, amb un detall millorat i amb la possibilitat de situar l’espectador en una experiència immersiva XR.
La plataforma facilitarà la creació d’experiències XR per al turisme i l’entreteniment a bord del cotxe, amb una experiència sense precedents habilitada per la localització d’alta precisió i la recuperació i adaptació d’actius multimèdia rellevants basats en la ubicació de l’usuari.
XReco també facilitarà la reutilització de contingut XR desenvolupant pràctiques d’arxiu, formats i eines adequades per al conjunt heterogeni d’actius i metadades per a produccions XR. Millorar la localització i la interoperabilitat del contingut XR arxivat també permet la reutilització de contingut per part d’altres organitzacions.

Els impactes a llarg termini es defineixen de la següent manera:

Major inclusivitat, donant suport a un enfocament centrat en l’ésser humà per al desenvolupament tecnològic que estigui alineat amb els valors socials i ètics europeus, així com amb la sostenibilitat.
Llocs de treball sostenibles i d’alta qualitat, abordant els desajustos de competències, la necessitat d’apoderar els treballadors i les consideracions ètiques relacionades amb el progrés tecnològic.