About this role
- Stages -
- Vakgebieden
- Beveiliging
- Facilitair
- Horeca
- Hospitality
- Kantoor
- Logistiek cargo
- Werken in de cargo
- Logistiek vluchtafhandeling
- Retail
- Techniek
- Vervoer
- Werken in vervoer & transport
We zoeken een gemotiveerde en technisch vaardige derde- of vierdejaars stagiair(e) die wil bijdragen aan onze data-engineeringactiviteiten. We werken onder andere met Scala, Spark, Dataproc, BigQuery en Bigtable.
Wat ga je doen?
- Onderzoek mogelijkheden om datakwaliteit automatisch te monitoren en valideren.
- Ontwerp en implementeer verbeteringen aan controles in bestaande pipelines, bijvoorbeeld met Spark en BigQuery.
- Ontwikkel automatische meldingen, bijvoorbeeld via Microsoft Teams of e-mail, om mogelijke problemen met de datakwaliteit te signaleren. Help ons het centrale dashboard en de monitoringoplossingen van het team te verbeteren. Deze geven inzicht in onze draaiende componenten en verschillende automatiseringen.
- Bekijk de huidige oplossingen en breng mogelijkheden in kaart om ze nuttiger en overzichtelijker te maken.
- Onderzoek en adviseer hoe monitoringinformatie effectiever kan worden gepresenteerd.
- Implementeer geselecteerde verbeteringen en test deze samen met het team. Onderzoek hoe we de prestaties en efficiëntie van onze Spark-datapipelines kunnen verbeteren.
- Analyseer pipelines om mogelijkheden voor optimalisatie te vinden.
- Onderzoek en test oplossingen, zoals efficiënte bestandsformaten als Apache Parquet of verbeteringen in geheugengebruik.
- Meet het effect van aanpassingen en documenteer je bevindingen.
- Talen en tools: Scala, Spark
- Platforms: Google Cloud Dataproc, BigQuery, Bigtable
- Praktische ervaring opdoen met schaalbare technologieën voor dataverwerking.
- Vaardigheden ontwikkelen in het automatiseren van taken binnen data-infrastructuur.
- Je technische documentatievaardigheden verbeteren.
- Samenwerken met een enthousiast team aan innovatieve d...