Data Engineer

Als Data Engineer ben je de architect en eigenaar van onze cruciale data pipelines. Je speelt een centrale rol in onze ambitie om dagelijks miljarden records te verwerken en onze data-infrastructuur naar een hoger niveau te tillen. Je bent verantwoordelijk voor het gehele proces: van data-invoer tot het leveren van uiteindelijke inzichten.

Belangrijkste Verantwoordelijkheden:

• Ontwerp & Bouw: Het ontwerpen, bouwen en uitrollen van nieuwe end-to-end data pipelines vanaf de basis om diverse en grote databronnen te integreren.

• Massale Verwerking: Het schrijven van efficiënte en schaalbare verwerkingslogica met behulp van (Py)Spark (in AWS Glue) om dagelijks miljarden records te verwerken, te schonen en te transformeren.

• Infrastructure as Code (IaC): Het beheren en definiëren van de gehele data-infrastructuur (AWS Glue jobs, S3 buckets, Lambda functions) als code met behulp van Terraform. Dit vormt de kern van jouw "eigenaarschap."

• Kwaliteit & Prestaties: Verantwoordelijk zijn voor de kwaliteit, monitoring en prestaties van de pipelines die je bouwt, waarbij je zorgt dat data accuraat en op tijd in ons Data Lakehouse landt.

• Datademocratisering: Actief assisteren bij het onboarden van nieuwe databronnen, zodat jouw werk direct leidt tot meer inzichten en tastbare waarde binnen de hele organisatie.

Vereiste Vaardigheden en Ervaring:

Essentiële Vaardigheden (Harde eis):

• Aantoonbare ervaring in Python.

• Hands-on ervaring met AWS Glue is een vereiste.

• Solide begrip van het AWS data-ecosysteem (S3, IAM, Lambda's, CloudWatch).

• Bewezen ervaring met Infrastructure as Code (IaC) is verplicht, bij voorkeur Terraform.

• Vakkundigheid in het gebruik van (Py)Spark voor grootschalige dataverwerking.

Pre's:

• Ervaring met Snowflake.

• Ervaring met Hudi (of vergelijkbare technologieën voor data lake transacties).

Wat Wij Bieden

Wij bieden een dynamische werkomgeving met volop ruimte voor creativiteit en innovatie. Naast de kans om te werken met een state-of-the-art data stack en je stempel te drukken op onze data-architectuur, bieden we:

• Een marktconform salaris tussen € 3.500 en € 5.500 bruto per maand (op basis van 40 uur), afhankelijk van je ervaring en senioriteitsniveau.

• Uitgebreide mogelijkheden voor persoonlijke en professionele ontwikkeling en training.

• De nodige ondersteuning en middelen om je werk optimaal uit te voeren.

• Een werkplek met gedreven professionals waar ook ruimte is voor plezier en ontspanning.

Heb je interesse en denk jij dat je de Data Engineer bent die complexe uitdagingen kan omzetten in betrouwbare, slimme oplossingen, solliciteer dan direct via onze website!