Data IQ Tool

Data IQ Tool læser CSV- eller JSON-datasæt og beregner en sammensat kvalitets-score baseret på fuldstændighed, gyldighed, unikhed, konsistens og overensstemmelse med rækkevidde. Den rapporterer feltspecifikke målinger for at lokalisere kilden til kvalitetsproblemer og vejlede afhjælpning.

Konceptionen behandler data-kvalitet som en multidimensionel egenskab. Den håndhæver skemaoverensstemmelse, opdager manglende værdier og typeafvigelser, identificerer dubletter, kontrollerer værdiregler og flagger unormale mønstre. Profilering og valgfrie regler-biblioteker understøtter tilpasning til brancherapporterede datasæt.

Modtagere inkluderer dataingeniører der forbereder pipelines, analytikere der validerer indkommende data og styringsgrupper der reviderer datakvalitet. Værdien ligger i gennemsigtige score-regler, chunked processing for store datasæt og eksportérbare rapporter egnet til revision og tværgående kommunikation.

Nuvrige funktioner inkluderer datasætindlæsning, feltspecifikke statistikker, et konfigurerbart valideringssæt, anbefalinger til afhjælpning og eksportmuligheder for JSON og CSV. Anvendelsestilfælde inkluderer forud-ETL-validering, datakvalitetsovervågning og rotårsagsanalyser af kvalitetsbegivenheder.