Data engineer Airflow

Hallo interim Data Engineer (Airflow)! Wil jij werken in het hart van de energietransitie? 32 – 40 uur | Amersfoort / Hybride | Energiemarkt | Startdatum z.s.m. | Duur opdracht 6 maanden | ZZP/deta toegestaan De opdrachtgever is een snelgroeiende organisatie die bijdraagt aan de verduurzaming van Nederland. Elke dag werk je samen met partners in de energiesector. Met jouw kennis van data engineering, dimensionele modellen en ETL-processen ben jij in staat om een robuust dataplatform op te zetten en betrouwbare datastromen te realiseren. Daarmee draag jij bij aan een duurzame marktfacilitering. De organisatie heeft flinke ambities en is daarom op zoek naar jou! Werk op het snijvlak van data, techniek en energietransitie. JE TAKEN Als Data Engineer ga je in teamverband werken aan de migratie en optimalisatie van ETL-processen. Deze processen worden momenteel vanuit Snowflake aangestuurd en worden naar Airflow gemigreerd. Gezamenlijk zijn jullie verantwoordelijk voor het project waarbij zo optimaal mogelijke workflows moeten worden gerealiseerd. Je werkt gezamenlijk aan oplossingen voor problemen die het team tegenkomt en stemt deze af met de architect en het vaste platformteam. Dit ga je doen - Ontwerpen en bouwen van ETL-processen met DBT en Airflow - Inrichten van het dataplatform in Snowflake volgens de Medallion Architectuur - Optimaliseren van performance en betrouwbaarheid van datastromen - Samenwerken met analisten en modelleurs om data om te zetten naar bruikbare inzichten - Meedenken over technische keuzes en kwaliteitsverbeteringen Samenwerken en kennis delen HIER KRIJG JIJ ENERGIE VAN Je krijgt energie van het werken in een Agile team waar samenwerking en eigenaarschap centraal staan. Je vindt het leuk om complexe datavraagstukken op te lossen en hebt oog voor kwaliteit en betrouwbaarheid. Je hebt interesse in de energiemarkt en draagt graag bij aan maatschappelijke impact. Je bent een teamspeler die meedenkt op alle niveaus en niet bang is om initiatief te nemen. DIT NEEM JE VERDER MEE - Ruime ervaring met (Snowflake) SQL en DBT (must) - Ervaring met Airflow en Snowflake (must) - Diepgaande kennis van dimensionele modellen en incrementele ETL-processen (must) - Ervaring met ontwerpen van ETL-stromen (must) - Ervaring met analyse van datastromen - Ervaring met reversed engineering - Ervaring met Kafka is een pré - Ervaring met AWS - Ervaring in de energiesector, bij voorkeur specifiek bij minimaal één van de netbeheerders (pré) - Je bent een teamspeler die graag Agile werkt en bent communicatief sterk - Oog voor datakwaliteit: volledig en juist - Oog voor kwaliteit en een modulaire opzet OVER DE OPDRACHTGEVER De opdrachtgever is een groeiend bedrijf dat snel stappen zet in de professionalisering van haar organisatie. Van startup naar scale-up. De organisatie ontwikkelt voor alle regionale en landelijke netbeheerders een betrouwbare en innovatieve ICT-infrastructuur. Ze specialiseren zich in het verzamelen en bereikbaar maken van gebruiksdata, die andere marktpartijen weer kunnen gebruiken voor het ontwikkelen van nieuwe diensten. Met die datadiensten geven ze de energietransitie en daarmee ook de verduurzaming van Nederland ruim baan. Lijkt deze freelance opdracht je wat en voldoe je aan de eisen? Reageer dan direct via de link onderaan deze pagina.