Azure data-engineer

Als Azure data-engineer (devops engineer) bij de AFM ben je verantwoordelijk voor het ontsluiten, structureren en prepareren van data voor uiteenlopende domeinen. In onze Azure cloudomgeving bevindt de data zich verspreid over Databricks, SQL-databases en Azure Storage (flat files/blobs). Je richt deze omgevingen in zodat zowel interne als externe gebruikers – waaronder toezichthouders – direct aan de slag kunnen met kwalitatief hoogwaardige data.

Naast je technische rol fungeer je als een consultant op het gebied van datakwaliteit en security. Aangezien de AFM ook privacygevoelige data ontvangt, houd je rekening met de security-aspecten die daarbij komen kijken. Je draagt daarnaast bij aan de optimalisatie van de data-operaties door automatisering en het toepassen van een DevOps- en DataOps mindset.

Je wordt onderdeel van de afdeling Datagedreven Toezicht. Deze afdeling heeft decentrale Business-DevOps-teams en een platformteam met datamanagementspecialisten, data-engineers, data-infrastructuurspecialisten.

• Data voorbereiden en structureren: Je ontwerpt en implementeert oplossingen voor het integreren en structureren van data in diverse opslagvormen, waaronder Databricks, SQL en Azure Storage.

• Automatiseren en innoveren: Je ontwikkelt en beheert CI/CD pipelines (met Azure DevOps), zodat veranderingen op een geautomatiseerde en soepele wijze worden uitgerold.

• Technisch advies en kwaliteitsbewaking: Je fungeert als technisch consultant en draagt bij aan de verbetering van datakwaliteit en security binnen de organisatie.

• Samenwerking en kennisdeling: Je werkt nauw samen met collega’s binnen het platformteam en deelt actief je kennis en best practices over data-engineering en DevOps.