Data Engineering Associate II-1

Over de functie

Als Data Engineering Associate ben je verantwoordelijk voor het ontwerpen, bouwen, automatiseren en onderhouden van data‑processen. Je werkt binnen een internationaal team van BBVA en draagt bij aan de kwaliteit en beschikbaarheid van data voor miljoenen klanten.

Belangrijkste verantwoordelijkheden

• Ontwerpen en implementeren van ingest‑, transformatie‑ en kwaliteitsprocessen voor grote datasets.
• Automatiseren van ETL/ELT‑pipelines en waarborgen van traceerbaarheid en beveiliging.
• Uitvoeren van operationele taken van middel‑ tot hoge complexiteit volgens vastgestelde standaarden.
• Beheren van data‑infrastructuur in Hadoop‑ecosystemen en cloud‑omgevingen.

Gewenst profiel

• Ervaring met data‑engineering in een complexe, grootschalige omgeving.
• Bekendheid met financiële of bancaire sector is een plus.
• Zelfstandig kunnen werken en samenwerken in multidisciplinaire teams.

Vereiste vaardigheden

• Python voor ontwikkeling, automatisering en API‑consumptie.
• PySpark en Apache Spark voor gedistribueerde verwerking.
• Geavanceerde SQL voor query‑optimalisatie en modellering.
• Ontwerp en exploitatie van ETL/ELT‑pipelines.
• Hadoop, HDFS en gerelateerde Big‑Data‑technologieën.
• Versiebeheer met Git.
• Linux, Bash‑scripting en taak‑automatisering.
• Docker of Podman voor containerisatie.
• Kennis van data‑kwaliteit, governance, security en traceerbaarheid.
• AWS‑diensten: S3, Athena, Glue, EMR, Lambda, IAM en SageMaker.