Freelance Medior Data Quality Engineer Azure Databricks (Medior)

📋 Taken en verantwoordelijkheden

Je ontwerpt, bouwt en onderhoudt datakwaliteitspipelines voor bedrijfskritische data-assets en maakt datakwaliteitsproblemen inzichtelijk. Het gaat onder meer om data over haltes, lijnen en ritten.

- Je verdiept je in de businesscontext van de gebruikte data, zodat je zowel technisch als inhoudelijk sterk onderbouwd werkt.

- Je visualiseert datafouten en kwaliteitsissues voor data stewards en dataproducenten, onder meer met Power BI.

- Je ontwerpt, ontwikkelt en beheert datakwaliteitspipelines in een moderne Azure-omgeving.

- Je stemt af met data stewards over kwaliteitsvereisten en verwachtingen rond hun data.

- Je vertaalt functionele kwaliteitsvereisten naar technische kwaliteitsregels.

- Je implementeert kwaliteitsregels in datapipelines en monitoringprocessen.

- Je denkt proactief mee over prioritaire datakwaliteitsnoden en stelt verbeteringen voor.

- Je draagt bij aan de verdere uitbouw van een schaalbaar datakwaliteitsprogramma.

- Je werkt samen met stakeholders binnen ICT, datateams, data governance en de business.

Je combineert technische expertise met een goed begrip van de business en slaat vlot de brug tussen technische oplossingen en organisatorische behoeften.

Je komt terecht in een moderne dataomgeving waar dataproducten worden ontwikkeld. Daarbij wordt gewerkt met technologieën en methodieken zoals Azure Databricks, Unity Catalog, Azure Function Apps, Container Apps, Event Hubs, Data Factory, Apache Spark, SQL, Python, data contracts, het SODA data quality framework, Power BI en Power Query.
📝 Jouw profiel

- Je hebt ervaring als Data Engineer op mediorniveau.

- Je beheerst Python en/of SQL en werkt vlot met programmeertalen zoals Python.

- Je hebt ervaring binnen een Azure-omgeving.

- Je kent tools voor datakwaliteit, zoals Unity Catalog en/of SODA.

- Je hebt kennis van data quality, data management en data governance.

- Je gebruikt Databricks als exploratietool.

- Je hebt ervaring met het ontwerpen en implementeren van ETL-processen.

- Je bent vertrouwd met databanken en met het opzetten van een data quality framework.

- Je kan datakwaliteitsinzichten helder visualiseren, bijvoorbeeld met Power BI.

⚠️ Deze functie wordt aangeboden als een deeltijdse freelance rol (60%).

Originally posted on Himalayas