Dataförändringar

Dataförändringar avser förändringar i information som lagras i datasystem över tid. Det kan gälla uppdateringar av befintliga poster, skapande av nya poster, borttagningar samt förändringar av strukturer eller regler som styr hur data lagras och behandlas. Dataförändringar uppkommer i operativa databaser, datawarehouses, arkiv och i dataflöden mellan system.

Vanliga typer inkluderar: transaktionella uppdateringar som ändrar fältvärden i befintliga rader; batch- eller streambaserade ändringar; korrigeringar och sanering av felaktig data; skapande av nya versioner av poster och referenser; samt schemaändringar som påverkar kolumner, tabeller eller relationer.

Spårbarhet och ansvar är centralt: ändringar dokumenteras i ändringsloggar, med tidsstämplar och information om hvem som gjorde förändringen. Data lineage visar hur data har flyttats och transformerats. Versionering och append-only loggar möjliggör återställning till tidigare tillstånd och spårning av historiska värden.

Styrning och regelverk omfattar data governance, dataskydd och datakvalitet. Policyer bör definiera vem som har behörighet att ändra data, vilka gransknings- och godkännandeprocesser som gäller, hur ändringar testas, och hur rollback genomförs. Regelverk kan kräva dokumentation av ändringar för regelefterlevnad och revision.

Tekniker och arbetsflöden för hantering av dataförändringar inkluderar change data capture (CDC) för att fånga förändringar i realtid, diff-verktyg för jämförelse mellan dataset, checksummor och datakvalitetskontroller, samt versionerade datasätt och kontrollpunkter i ETL-/ELT-processer. Vanliga utmaningar är samtidiga uppdateringar, stor volym och behov av snabb återställning.