Functieomschrijving
Voor HTM Personenvervoer zoeken wij een Data Engineer. Als Senior Data Engineer / Integratie Specialist ben jij de spil in het datalandschap van de opdrachtgever.
Je ontwerpt, bouwt en beheert de integraties tussen een breed scala aan applicaties en zorgt dat data veilig, snel en efficiënt stroomt.
Of het nu gaat om realtime streaming of traditionele API-koppelingen: jij weet er raad mee.
Als T-shaped specialist heb je diepgaande expertise in integratie- en cloudoplossingen en beschik je daarnaast over brede kennis van data engineering, analytics en DevOps, waardoor je niet alleen integraties ontwerpt en beheert maar ook de impact op het bredere dataplatform overziet.
Je migreert en optimaliseert integraties richting de Azure cloud-omgeving van de opdrachtgever, maakt intensief gebruik van containerisatie, microservices-architecturen en moderne dataplatformen en schrijft scripts om processen te automatiseren en complexe datastromen te manipuleren.
Jouw belangrijkste taken
- Integratie & Cloud: Je ontwerpt en implementeert serverless integraties en workflows met Azure Functions en Logic Apps. Het ontwikkelen en beheren van integraties binnen WSO2 API Manager en Micro Integrator is een sterke pré.
- Data Engineering: Je ontwerpt, bouwt en onderhoudt robuuste datapipelines (ETL/ELT) om data te ontsluiten, transformeren en te laden in het centrale dataplatform.
- Streaming & Messaging: Je ontwerpt en implementeert moderne integratiepatronen, API's, messaging- en streamingtechnologieën (zoals Kafka en Event Hubs) voor realtime dataverwerking.
- DevOps & Containerisatie: Je containeriseert integratie-oplossingen met Docker en orkestreert deze binnen Azure Container Apps. Je gebruikt CI/CD-pipelines en werkt volgens de nieuwste DevOps-standaarden.
- Scripting & Maatwerk: Je schrijft efficiënte scripts en maatwerkkoppelingen in Python voor datatransformaties en automatisering.
Jouw profiel
- Je bent analytisch sterk, communicatief vaardig en behoudt altijd het overzicht. Je hebt een passie voor cloudtechnologie, automatisering en moderne data-architectuur en schakelt moeiteloos tussen integratievraagstukken en data-engineering uitdagingen.
- Azure Cloud ervaring: Je hebt aantoonbare ervaring met werken in een Azure cloud-omgeving, specifiek met Azure Functions en Logic Apps. Ervaring met Azure Data Factory of Synapse/Databricks is een eis.
- Data Engineering & SQL: Je hebt ervaring met data modellering en het bouwen van betrouwbare datapipelines. Je schrijft complexe SQL-queries vlot en doelgericht.
- Development & Scripting: Je bent vaardig in Python voor datatransformaties, data-manipulatie (bijv. Pandas/PySpark) en automatiseringstaken.
- Integratie & Streaming: Je hebt ervaring met moderne integratiepatronen, API-management en messaging/streamingtechnologieën zoals Kafka en Event Hubs.
- Containers & Orchestratie: Je hebt gedegen kennis van Docker en ervaring met het beheren of uitrollen van applicaties in Kubernetes en/of Azure Container Apps.
- Protocollen & Data-formaten: Je kent data-uitwisselingsprotocollen en standaarden zoals REST, JSON, HTTP(S), SOAP, XML, XSLT, SFTP en SQL.
- DevOps mindset: Je hebt ervaring met tooling zoals Git, Azure DevOps en Jira en werkt resultaatgericht binnen DevOps-processen.
Functie eisen
- Je beschikt over aantoonbare ervaring in een Azure-cloudomgeving, met name met Azure Functions en Logic Apps
- Je hebt ervaring met Azure Data Factory of met Synapse/Databricks
Functie wensen
- Het is een sterke pré als je ervaring hebt met het ontwikkelen en beheren van integraties binnen WSO2 API Manager en Micro Integrator
- Het is een eis dat je ervaring hebt met Azure Data Factory of Synapse/Databricks