realtidsdatastrømsystem
Realtidsdatastrømsystem er en softwarearkitektur og infrastruktur der håndterer kontinuerlige dataflow i realtid. Formålet er at indsamle, behandle og levere data med lav latens og høj gennemløb, så virksomheden kan reagere øjeblikkeligt på begivenheder, mønstre og ændringer i data.
Arkitekturen består typisk af datakilder (datastrømme fra sensorer, applikationer eller logfiler), en meddelelsesmotor eller strømbroker til
Vigtige egenskaber omfatter lav end-to-end-latens, høj gennemløb, fault tolerance og evnen til at bevare og rekonstruere
Anvendelsesområder inkluderer finansiel handel og risikostyring, IoT og sensordata, overvågning og sikkerhed, realtids analytics og operativ
Udfordringer omfatter data-kvalitet og schema-evolution, backpressure og latency-udfordringer, data governance, sikkerhed, compliance og kompleksiteten ved at