Multimediajärjestelmissä

Multimediajärjestelmissä tarkoitetaan kokonaisuutta, joka hallitsee ja esittää useita mediaformaatteja samanaikaisesti. Tällaiset järjestelmät käsittelevät tekstiä, kuvia, ääntä, videota ja animaatioita sekä niihin liittyvää metatietoa. Tavoitteena on tarjota saumaton, vuorovaikutteinen käyttäjäkokemus sekä tehokas tallennus, muokkaus ja esitys erilaisilla laitteilla.

Keskeisiä komponentteja ovat sekä laitteisto että ohjelmisto: suorituskykyinen prosessori, muistia ja tallennusvälineet, äänikortti sekä näytönohjain. Ohjelmistopuolella ovat mediasoittimet, muokkaus- ja esityökalut, sekä verkkoselaimet ja mobiilisovellukset. Lisäksi käytetään koodekkeja, kontteja ja metadata-standardeja media-aineiston käsittelyyn.

Media on aikaperusteista, jolloin synkronointi on keskeinen tekijä: ääni ja kuva on ajastettava yhteen. Käytettäviä koodekkeja ja kontteja ovat esimerkiksi H.264/AVC, H.265/HEVC, VP9 sekä MP4, MKV, AAC ja MP3. Verkkotoistossa huomioidaan puskurointi, bittivirta ja laadunhallinta.

Arkkitehtuuri voi olla paikallinen, pilvipohjainen tai sekoitus näitä: client-server-, CDN- ja hajautettuja ratkaisuja. Suoratoisto ja verkkopalvelut hyödyntävät usein verkkoyhteyksiä sekä välimuistiasetuksia, kun taas offline-tilassa laitteet käsittelevät materiaalin suoraan.

Sovelluskohteita ovat viihde, koulutus, televisio ja digitaalinen media sekä julkiset ja kaupalliset käyttöliittymät. Haasteita muodostavat yhteensopivuus, standardien fragmentaatio, tekijänoikeudet ja saavutettavuus. Tekniikan kehitys, kuten pilvipohjainen käsittely, streaming ja tekoälyyn pohjautuva metadatatuotanto, vaikuttavat alan suuntiin.