Data Engineer

Functie

Senior Data Engineer

Wat ga je doen

• Vertalen van informatiebehoefte naar succesvolle data-oplossingen.
• Ontwikkelen van generieke datasets en oplossen van Data Engineering-vraagstukken, zoals interfacing van en naar het platform.
• Ontwerpen en implementeren van oplossingen met Databricks, Airflow en (toekomstig) Microsoft Fabric.
• Ontwikkelen van oplossingen met SQL en Python en het aanroepen van API's.
• Slim omzetten van ruwe data (bijv. sensordata) naar bruikbare informatie.
• Onderhouden van reeds gebouwde datastromen en uitvoeren van beheerwerkzaamheden binnen het team.
• Coachen van collega-Engineers en samenwerken met platformteams, dataleveranciers en architecten.
• Balanceren tussen het realiseren van klantwensen en het minimaliseren van technical debt.

Vereisten

• Opleiding: Minimaal hbo werk- en denkniveau.
• Ervaring: Minimaal 5 jaar relevante werkervaring.
• Aantoonbare ervaring met doorvertalen van features naar technische oplossingen binnen bestaande architectuurkaders.
• Ervaring met verschillende databases, waaronder SQL Server en Databricks; bekend met datalake-concepten zoals Delta Lake.
• Aantoonbare ervaring met ELT/ETL-flows.
• Ervaring met het schrijven van Python- en SQL-scripts.
• Werken aan en met API's is een pré.
• Kennis van en ervaring met best practices voor software-engineering: OTAP, versiebeheer in GIT, testautomatisering en CI/CD.
• Sterke communicatieve vaardigheden en ervaring met coaching van collega’s.
• Kennis van en ervaring met verschillende datamodeleertechnieken; kennis van Data Vault is een pré.
• Kennis van Microsoft Fabric is een pré (in verband met migratie van Databricks).

Werkomgeving

• Werken in Scrum-teams en op basis van DevOps.
• Combinatie van ontwikkel- en beheerrol; tevens adviserende rol richting de business.
• Werkwijze volgens Agile/SAFe-methodiek.
• Mogelijkheid tot thuiswerken; aanwezigheid op kantoor wordt minimaal eenmaal per week verwacht (standplaats Rotterdam Blaak).

Eisen

• Data Engineer 5 jaar
• Databricks 2 jaar
• Delta Lake 1 jaar
• ELT 2 jaar
• ETL 2 jaar
• Features 2 jaar
• Python 2 jaar
• SQL 3 jaar

Wensen

• API
• CI/CD
• Datavault
• Fabric
• GIT
• OTAP

Vul je gegevens hieronder in, dan nemen we binnen 2 uur contact met je op om samen te kijken of er een match is. Heb je nog vragen? Bel ons op 030-249 66 96 of stuur een e-mail naar info@greenpepper.nl We helpen je graag verder!