Dataintensiivistä

Dataintensiivistä tarkoittaa tilaa tai tehtäviä, joissa suorituskyky riippuu ennen kaikkea tiedon käsittelystä, siirtämisestä ja tallentamisesta suuret datamäärät huomioiden. Tällaiset järjestelmät ja sovellukset nojaavat vahvasti datan saatavuuteen ja liikuttamiseen, eikä niinkään pelkästään laskentatehoon. Esimerkkejä ovat suurten datasetien analysointi, tilastolliset mallit sekä reaaliaikainen tiedonkeruu.

Ominaisuudet: volyymi, nopeus ja monimuotoisuus eli dataintensiivisyyden kolmet V:t sekä datan laatu, hallinta ja turvallisuus. Dataintensiivisyys korostaa tiedon varastoinnin ja siirto- sekä hakutoimintojen suorituskykyä. Hankintoja suunniteltaessa huomioidaan skaalautuvuus, kustannukset ja tietoverkkojen kapasiteetti. Hajautetut ratkaisut, pilvi sekä data-lake ja data-warehouse ovat tyypillisiä arkkitehtuurin piirteitä.

Arkkitehtuuri ja käytäntö: dataintensiivisissä ratkaisuissa keskitytään dataintegraatioon, ETL/ELT-prosesseihin sekä tehokkaaseen datavarastointiin. Suorituskykyä parannetaan jakelun ja muistin käytön sekä striimaukseen ja eräajoihin yhdistämällä. Käyttökohteita ovat liiketoiminnan analytiikka, koneoppiminen suurilla datamäärillä ja reaaliaikainen monitorointi.

Haasteet ja kehityssuuntaukset: datan laatu, saatavuus sekä kustannukset ovat keskeisiä. Tietosuoja, datan hallinta ja käyttöoikeudet vaativat vahvaa hallintaa. Kehityksessä korostuvat pilvi- ja edge-ratkaisujen yhdistäminen, automaatio sekä kustannustehokas datankäyttö.