Senior Streaming Data Engineer

Als ervaren Data Engineer krijg je de kans om te werken aan geavanceerde en schaalbare real-time streaming data-oplossingen binnen een innovatieve organisatie. Je bent verantwoordelijk voor het ontwikkelen en onderhouden van streaming platforms die zich richten op semigestructureerde sensorische data en beeldverwerking. Hierbij staat betrouwbare, efficiënte en schaalbare dataverwerking centraal, waarbij ook strenge security- en privacy-eisen worden gewaarborgd. JE TAKEN - Ontwikkelen en beheren van real-time streaming platformen met Spark Structured Streaming en PySpark. - Samenwerken met andere Data Engineers om geavanceerde data-oplossingen te ontwerpen en implementeren. - Inrichten van data pipelines tussen verschillende databronnen en analytics teams. - Opzetten en onderhouden van CI/CD pipelines voor streaming data workflows. - Werken binnen een Azure cloud omgeving om streaming en sensorische databronnen toegankelijk te maken voor verdere analyses. - Zorgen voor compliance met security- en privacyvereisten binnen de dataverwerking. GEZOCHT PROFIEL - Minimaal 7 jaar ervaring met het verwerken van grote hoeveelheden data, waaronder minimaal 3 jaar met Spark Structured Streaming. - Ruime ervaring met Python en PySpark, inclusief het ontwikkelen van CI/CD pipelines, geautomatiseerd testen en Infrastructure-as-Code. - Kennis van Java en/of Scala, Microsoft Azure, Databricks, Azure DevOps, Terraform en/of Bicep, OpenTofu, Kafka, AMQP, RabbitMQ en/of Event Hub. - Actuele kennis van technologische ontwikkelingen binnen data engineering en de drive om innovatieve oplossingen te creëren. - Zelfstarter die goed functioneert in een Agile werkomgeving binnen een jong en gedreven team. - Organisatiegerichte mindset met het vermogen om wensen te vertalen naar duurzame oplossingen en goed samen te werken. - Bereidheid om in de toekomst bereikbaarheidsdiensten te draaien. - Uitstekende beheersing van de Nederlandse taal, zowel mondeling als schriftelijk. Deze opdracht is alleen geschikt voor kandidaten die in loondienst zijn en waarvoor loonbelasting en premies volks- en werknemersverzekeringen worden afgedragen. Zelfstandige professionals, zzp’ers en directeur-grootaandeelhouders zonder werknemersverzekeringen komen niet in aanmerking. Lijkt deze freelance opdracht je wat en voldoe je aan de eisen? Reageer dan direct via de link onderaan deze pagina.