Full:Cardinalities

DataCleaner is een sterke dataprofileringsengine voor het ontdekken en analyseren van de kwaliteit van uw data. Vind de patronen, ontbrekende waarden, tekensets en andere kenmerken van uw gegevenswaarden. Het opvragen en profileren van uw gegevens is een essentiële activiteit van elk Data Quality-, Master Data Management- of Data Governance-programma. Als je niet weet waar je mee te maken hebt, heb je weinig kans om het op te lossen.

DataCleaner is gebouwd om zowel grote als kleine gegevens te verwerken. DataCleaner kan omgaan met allerhande databronnen zoals: CSV-bestanden, Excel-spreadsheets, relationele databases (RDBM's) en NoSQL-databases. DataCleaner gebruikt externe en interne referentiegegevens om te controleren of de gegevenswaarden overeenkomen met de echte wereld. Met DataCleaner kunt men eigen opschoningsregels bouwen en deze samenstellen in verschillende gebruiksscenario's of doeldatabases. Of het nu gaat om eenvoudige zoek-/vervangregels, reguliere expressies, patroonovereenkomst of volledig aangepaste transformaties, het is allemaal mogelijk.

Pluggability en Connectivity zijn sleutelwoorden voor de open source ontwerpfilosofie van DataCleaner. De applicatie biedt niet alleen kant-en-klare functionaliteit, maar herbergt ook een ecosysteem van door de gemeenschap aangestuurde integratie van applicatie-extensies, gedeelde inhoud en meer. Ontwikkelaars hebben de mogelijkheid om DataCleaner in te sluiten in andere applicaties, plug-ins te bouwen voor het specifieke gebruik of zelfs adapters te gebruiken die DataCleaner laten werken met Apache Hadoop en Apache Spark. Andere prominente integraties bestaan rond de integratie met Pentaho Data Integration, evenals ondersteuning voor aangepaste gegevensbrondefinities via het Apache MetaModel-framework.

Hoewel de licentie van de volledige DQ-oplossingen onderhevig is aan kosten, is de dataprofileringsmodule van Ataccama ONE vrij toegankelijk. Bij de gratis "Ataccama ONE profiler" ligt de focus op dataprofilering en is er jammer genoeg geen monitoringfunctionaliteit aanwezig, die wel beschikbaar is in de betalende versie. Volgens de website van Ataccama zou de betaalde tool ook een veel rijker scala aan functies bieden, inclusief DQ-monitoring. De dataprofileringsmodule is zeer intuïtief en gebruiksvriendelijk, ook voor niet-technische gebruikers.

Een interactieve tool voor het opschonen en transformeren van gegevens. Het helpt data-analisten bij het sneller en nauwkeuriger opschonen en voorbereiden van rommelige gegevens.Trifacta Wrangler geeft aan waar er patroonafwijkingen zijn in de gegevensinvoer van elke kolom, zodat er gemakkelijk opmaakfouten kunnen geïdentificeerd worden.

Het gebruikt machine learning om de gegevens conflict vrij te maken door gemeenschappelijke transformaties en aggregaties voor te stellen. De basisversie is gratis tot 100 MB aan gegevens, daarna start de prijs van de licentie vanaf $ 419 per maand met extra functies.

Deze geavanceerde tool, voorheen bekend als Google Refine, is handig voor het omgaan met 'dirty' gegevens, het opschonen en wijzigen ervan. OpenRefine is een Open Source-programma. Het belangrijkste voordeel ten opzichte van de andere tools op onze lijst is dat het gratis te gebruiken en te configureren is omdat het open source is.

OpenRefine kan gegevens converteren tussen meerdere indelingen en ervoor zorgen dat deze goed gestructureerd zijn. Het kan ook worden gebruikt om gegevens van internet te ontleden. Het lijkt op een relationele database. Dit maakt het zeer nuttig voor data-analisten die meer informatie willen dan een standaard Excel-bestand kan bieden.

Een ander belangrijk voordeel is dat de gegevens de eigen machine niet verlaten, waardoor de gegevens absoluut veilig blijven. OpenRefine kan connecteren met externe online diensten en andere cloudbronnen om een dataset te valideren of uit te breiden. Hoewel het een reeks complexe taken kan uitvoeren om het te gebruiken, heb je slechts een beperkte technische kennis nodig om OpenRefine te gebruiken.