Website STAFIDE
Als Data Engineer zal je:
- Nieuwe bronsystemen aansluiten op de data lake en bestaande ETL-processen migreren naar de nieuwe Data Lake (2.0).
- Monitoring- en waarschuwingsmechanismen implementeren om de observatie van ETL-processen te verbeteren.
- Monitoringactiviteiten uitvoeren en ondersteuning bieden bij het oplossen van ETL-gerelateerde incidenten in pre-productie- en productieomgevingen.
Wat je meebrengt:
- 8-10 jaar ervaring in data engineering, met een specialisatie in AWS-gebaseerde data lake-oplossingen.
- Vaardigheid in Kafka event streaming, met sterke expertise in implementatie en optimalisatie.
- Geavanceerde kennis van SQL, Python en PySpark voor dataverwerking en transformatie.
- Hands-on ervaring met ETL-processen binnen verschillende data lake-stadia.
- Bekendheid met GitHub versiecontrolesystemen en workflow-best practices.
- Praktische ervaring met AWS CDK (Cloud Development Kit) in Python voor Infrastructure as Code.
- Sterke kennis van AWS-native diensten zoals Athena, Glue, Lambda en ECS.
- Ervaring met DataOps, onderhoud en ondersteuning om soepele operaties te garanderen.
- Sterke communicatieve vaardigheden in het Engels, met een oog voor detail en een beveiligingsbewuste instelling.
Je beschikt over het vermogen om:
- Conceptueel en analytisch te denken om patronen en inzichten te identificeren.
- Probleemoplossend en kritisch te denken bij het optimaliseren van datapijplijnen.
- Te werken in Agile omgevingen, waarbij je prioriteiten effectief beheert.
- CI/CD best practices toe te passen voor datakwaliteit en continue implementatie.
- Beveiligingsaspecten in AWS (IAM-beleidsregels, security groups, etc.) te begrijpen.
- Datavalidatie en governance te waarborgen via sterke datakwaliteitspraktijken.
- Innovatief te zijn door nieuwe technologieën en oplossingen te verkennen en te implementeren.
Wat wij bieden:
- Een dynamische en samenwerkende werkomgeving gericht op geavanceerde data-oplossingen.
- Mogelijkheden om te werken aan impactvolle projecten binnen cloudgebaseerde data-engineering.
- Voortdurende leer- en ontwikkelingskansen met blootstelling aan moderne datatechnologieën.
- Een cultuur die innovatie stimuleert en de toepassing van best-in-class industriepraktijken aanmoedigt.
To apply for this job please visit jobs.stafide.nl.