Senior Streaming Data Engineer

Als Senior Streaming Data Engineer werk je aan geavanceerde en schaalbare data-oplossingen met Spark Structured Streaming en PySpark. Je ontwikkelt en onderhoudt real-time streaming platforms die gericht zijn op semigestructureerde sensorische data en beeldverwerking. Hierbij zorg je voor betrouwbare en efficiënte dataverwerking, waarbij security- en privacy-eisen strikt worden nageleefd. JE TAKEN - Ontwikkelen en onderhouden van real-time streaming platformen voor semigestructureerde sensorische databronnen en beeldverwerking. - Samenwerken met andere Data Engineers om schaalbare data-oplossingen te ontwerpen en implementeren. - Inrichten van data pipelines tussen databronnen en analytics teams. - Opzetten en beheren van CI/CD pipelines voor streaming data van ontwikkeling tot productie. - Bouwen aan een fundament in de Azure cloud omgeving voor ontsluiting van streaming en sensorische databronnen. - Waarborgen van security- en privacyvereisten binnen alle dataprocessen. GEZOCHT PROFIEL - Minimaal 7 jaar ervaring als Data Engineer met grote hoeveelheden data. - Minimaal 3 jaar ervaring met Spark Structured Streaming. - Ruime ervaring met Python en PySpark, CI/CD pipelines, geautomatiseerd testen en Infrastructure-as-Code. - Kennis van Java en/of Scala, Microsoft Azure, Databricks, Azure DevOps, Terraform en/of Bicep, OpenTofu, Kafka, AMQP, RabbitMQ en/of Event Hub. - Actuele kennis van technologische ontwikkelingen binnen dit domein en de ambitie om innovatieve oplossingen te creëren. - Zelfstarter die graag in een Agile omgeving werkt binnen een jong en gedreven team. - Waarde- en organisatiegerichte mindset met het vermogen om wensen te vertalen naar duurzame oplossingen. - Bereidheid om in de toekomst bereikbaarheidsdiensten te draaien. - Uitstekende beheersing van de Nederlandse taal, zowel mondeling als schriftelijk. Deze zzp opdracht is alleen geschikt voor kandidaten die in loondienst zijn en waarvoor loonbelasting en premies volks- en werknemersverzekeringen worden afgedragen. Zelfstandige ondernemers, zzp’ers of directeur-grootaandeelhouders die niet verzekerd zijn voor werknemersverzekeringen komen niet in aanmerking. Lijkt deze freelance opdracht je wat en voldoe je aan de eisen? Reageer dan direct via de link onderaan deze pagina.