Auf der IBC 2023 zeigt das Fraunhofer HHI, wie der neueste Versatile Video Coding-Standard (H.266/VVC) das Videostreaming qualitativ deutlich verbessert: Einerseits durch seine höhere Effizienz der Codierung im Vergleich zu den bereits etablierten Vorgängerstandards und andererseits dadurch, dass er eine sogenannte Open-GOP-Kodierung mit verschiedenen Auflösungen ermöglicht. Während auf der IBC-Konferenz der technische Hintergrund zur Open-GOP-Kodierung mit VVC vorgestellt wird, demonstriert das Fraunhofer HHI am Messestand die Anwendung von VVC in zwei realen Szenarien für dynamisches adaptives Streaming über HTTP (DASH): Cloud-Transcoding und Live-Encoding.

Für das Cloud-Transcoding-Szenario wurde der weltweit schnellste, quelloffene und hocheffiziente VVC-Encoder – VVenC – des Fraunhofer HHI in die hochskalierbare Cloud-Transcoding-Plattform von Bitmovin integriert. Die Wiedergabe und das Umschalten zwischen den VVC-Streams mit unterschiedlichen Auflösungen erfolgt auf einem Tablet, auf dem der Bitmovin-Player läuft. Dieser nutzt wiederum den schnellsten, quelloffenen und standardkonformen VVC-Decoder des Fraunhofer HHI: VVdeC.

Im Live-Encoding-Szenario erzeugt der Spin Digital VVC Live-Encoder 8K-, 4K- und 2K-Streams, die mit dem Elmedia-Player auf einem aktuellen Apple Mac Studio abgespielt und auf einem 8K-Fernseher angezeigt werden. Auch hier ermöglicht der VVdeC des Fraunhofer HHI dem Elmedia-Player die Echtzeit-Wiedergabe von VVC-kodierten Videos bis zu 8K.

Interaktives Volumetrisches Video

Das neue Medienformat „Volumetric Video“ wird interaktiv. Auf der diesjährigen IBC präsentieren wir neue Ansätze für hochrealistische, interaktive volumetrische Videos. Ein kürzlich fertig gestelltes Virtual Reality Erlebnis zeigt das digitale Zeugnis einer Holocaust-Überlebenden. Benutzer*innen sind eingeladen, die Zeitzeugin zu treffen und ihren Erinnerungen zu lauschen, wobei sie die Benutzer*innen immer ansieht. Erreicht wird dies durch eine Echtzeitanimation des Kopfes der volumetrischen Figur, um den Blickkontakt herzustellen. Darüber hinaus werden auf dem Messestand unsere jüngsten Forschungsergebnisse zur volumetrischen Videoproduktion mit Deep-Learning-basierten Ansätzen und zum Lernen animierter Darstellungen aus volumetrischem Video vorgestellt.