Grup de recerca

Tecnologies media

El grup de recerca en Tecnologies media transforma la recerca acadèmica més avançada en experiències interactives i immersives que empoderen persones usuàries de sectors diversos. Investiguem sistemes de captura volumètrica per generar representacions 3D realistes de persones i entorns en temps real, desenvolupem plataformes de comunicació hologràfica i integrem funcionalitats de realitat ampliada (XR) que combinen el món físic i el digital. El nostre equip també treballa en l’streaming de vídeo 360° d’alta qualitat per crear narratives immersives i facilitar la participació remota, així com en l’ús de tecnologies de remote rendering per oferir experiències interactives complexes a través del web. El nostre equip multidisciplinari, format per personal de recerca, enginyeria i disseny, col·labora amb el sector i el món acadèmic per validar la innovació mitjançant pilots centrats en l’usuari o usuària, publicacions científiques i processos de transferència tecnològica. En connectar els avenços teòrics amb aplicacions preparades per al mercat, Tecnologies Media impulsa l’adopció de solucions media de nova generació que milloren la col·laboració, la formació, la presència remota i l’entreteniment.

Línies de recerca

Xarxes media: Aquesta línia de recerca se centra en la investigació i el desenvolupament de programari per a la distribució de continguts sincronitzada i de baixa latència en formats i plataformes diversos. Amb experiència en protocols com NTP, PTP, WebRTC i MPEG-DASH, el grup millora el rendiment de la xarxa i el processament de continguts en temps real mitjançant infraestructures escalables de núvol i edge computing. Les seves innovacions donen suport a producció en directe i esdeveniments interactius mitjançant arquitectures de lliurament adaptatives, gestió de sessions XR i sincronització avançada. Les àrees clau inclouen API 6G Network-as-a-Service (NaaS), renderització remota i en el núvol, i tecnologies de distribució de mitjans adaptades a dispositius de baix consum i condicions de xarxa variables.
Processament i optimització media: Aquesta línia impulsa tècniques avançades de compressió i distribució de vídeo volumètric per habilitar experiències AR/VR en temps real en una gran varietat de dispositius. Especialitzat en codificació accelerada per GPU, el grup ha creat solucions de streaming en temps real per a núvols de punts densos i tècniques de 3D Gaussian Splatting, reduint notablement amplada de banda i emmagatzematge. Aquestes tecnologies són essencials per a la creació de continguts 3D d’alta qualitat, bessons digitals i streaming volumètric. La seva feina té impacte directe en sectors com la indústria, la salut, l’educació i l’entreteniment, i fa més eficient i accessible el contingut immersiu.
Captura i reconstrucció media: Aquesta línia desenvolupa sistemes de captura volumètrica multicàmera d’alta fidelitat basats en RGB-D per a reconstrucció humana instantània i diferida. Les seves solucions accelerades amb GPU fan possibles aplicacions com l’holoportació, la telepresència immersiva i les gravacions volumètriques. L’equip explora mètodes avançats com el Gaussian Splatting per millorar el detall i l’escalabilitat en la reconstrucció de persones i entorns. Aquestes innovacions donen suport a aplicacions de nova generació en narrativa immersiva, col·laboració virtual i experiències interactives, ampliant les capacitats del mitjà volumètric en entorns reals.

Línies d'innovació

Smart City: Compressió a gran escala de núvols de punts i Gaussian Splatting per a tecnologies de visualització territorial
Holoportació multiusuari en temps real
Vídeo immersiu
Vídeo volumètric
Comunicacions escalables
Compressió de núvol de punts
Compressió de Gaussian Splatting
Sincronització de fluxos
Reconstrucció 3D amb múltiples càmeres
Supersampling i eliminació de soroll
Qualitat de l’experiència
Transmissió adaptativa i de baixa latència

Group leader

Sergi Fernandez

Àrees

Tecnologies multimèdia immersives i interactives

Tecnologies media

Projectes

Tecnologies media

Publicacions

Interactive digital twins enabling responsible extended reality applications. (Nature, Scientific Reports)

Antoun, M., Elhajj, I. H., Sayour, M., Papadopoulos, P. K., Zarpalas, D., Rizk, A., Huerta, I., Toledo, L., … & Asmar, D. (2025). Interactive digital twins enabling responsible extended reality applications. Scientific Reports, 15(1), 34539 https://doi.org/10.1038/s41598-025-17855-9

Accessible scenic arts and Virtual Reality: A pilot study with aged people about user preferences when reading subtitles in immersive environments

E. Oncins, R. Bernabé, M. Montagud, V. Arnaiz (forthcoming). “Accessible scenic arts and Virtual Reality: A pilot study with aged people about user preferences when reading subtitles in immersive environments”. En: Mabel Richart-Marset & Francesca Calamita (eds.) 2020. Traducción y Accesibilidad en los medios de comunicación: de la teoría a la práctica, MonTI 12, pp. xxx-xxx

TiCMP: A lightweight and efficient Tiled Cubemap projection strategy for Immersive Videos in Web-based players

D. Gómez, J. A. Núñez, I. Fraile, M. Montagud, S. Fernández, “TiCMP: A lightweight and efficient Tiled Cubemap projection strategy for Immersive Videos in Web-based players”, ACM Workshop on Network and Operating Systems Support for Digital Audio and Video (ACM NOSSDAV), co-located with ACM MMSys, Amsterdam, 2018.

Content Format and Quality of Experience in Virtual Reality

H.G. Debarba, M. Montagud, et al., “Content format and quality of experience in virtual reality”, Multimed Tools Appl, 2022. https://doi.org/10.1007/s11042-022-12176-9

PC-MCU: Point Cloud Multipoint Control Unit for Multi-user Holoconferencing Systems

Gianluca Cernigliaro, Marc Martos, Mario Montagud, Amir Ansari, and Sergi Fernandez. 2020. PC-MCU: point cloud multipoint control unit for multi-user holoconferencing systems. In Proceedings of the 30th ACM Workshop on Network and Operating Systems Support for Digital Audio and Video (NOSSDAV ’20). Association for Computing Machinery, New York, NY, USA, 47–53.

FALCON: Joint Fair Airtime Allocation and Rate Control for DASH Video Streaming in Software Defined Wireless Networks

Catalan-Cid, Miguel and Camps-Mur, Daniel and Montagud, Mario and Betzler, August; “FALCON: Joint Fair Airtime Allocation and Rate Control for DASH Video Streaming in Software Defined Wireless Networks”, 2020, Proceedings of the 30th ACM Workshop on Network and Operating Systems Support for Digital Audio and Video (NOSSDAV 20), pages 14-20. https://dl.acm.org/doi/10.1145/3386290.3396931

totes les publicacions

Tecnologies media