Dewei Zhai

Werkervaring

1. Feb 2026 — present

   Enyquant

   Data Platform Owner & Platform Architect

   • Bouwde het cloud- en dataplatform van de startup: architectuur, code, deployment en dagelijks beheer.
   • Leverde vijf jaar nationale elektriciteits- en marktdata binnen 60 dagen en definieerde point-in-time zichtbaarheid voor modeltraining.
   • Verplaatste vergelijkbare dagelijkse workloads van Databricks + ADF naar DuckDB, Polars en DuckLake op één VM; circa 95% lagere maandkosten.
   Projectterugblik →

2. Nov 2023 — Oct 2025

   PVH · Tommy Hilfiger & Calvin Klein

   Lead Data Engineer

   • Vervulde de architectuurrol in een team van circa tien mensen voor een AWS-platform van 500+TB.
   • Introduceerde YAML-contracten, validatie en een DAG-factory. Een representatieve dashboardcyclus ging van 4–6 weken naar 1–2 uur; het platform ondersteunde 60+ dashboards.
   • Herbouwde een gecontroleerde PII-workflow met event-driven serverless: circa 2 uur → 5–10 minuten doorlooptijd en circa 90% lagere gerelateerde AWS-kosten.
   Projectterugblik →

3. Sep 2022 — Jan 2024

   VodafoneZiggo

   Senior Data Engineer

   • Verbeterde Scala/Spark ETL en beheerde AWS DMS Full Load + CDC voor een Oracle-naar-Snowflake-migratie binnen een Data Tribe van 100+ mensen.
   • Automatiseerde PowerCenter-conversie en validatie in GitLab CI/CD voor 40+ developers: feedback van uren/dagen naar minuten, met naar schatting 40+ uur minder handwerk per week.
   • Bouwde JupyterHub + MLflow-diensten voor 4–5 data scientists.
   Projectterugblik →

4. Dec 2020 — Aug 2022

   PVH

   Senior Data Engineer

   • Bouwde Adobe-, Salesforce- en SAP-integraties op een AWS-platform van 500+TB, nadat de oorspronkelijke migratie bijna was afgerond.
   • Ontwikkelde configuratiegestuurde, idempotente ETL en verbeterde datakwaliteit, observability en planning over tijdzones.

5. Aug 2018 — Nov 2020

   FedEx · former TNT Digital

   Data Engineer

   • Beheerde AWS/GCP-infrastructuur met Terraform en ontwikkelde BigQuery- en Spark/EMR-workloads. Rolde Spark uit, migreerde en beheerde het op een bestaand GKE-cluster.
   • Herwerkte een Spark-job voor 175 businesscases: eerst een OOM-fout na drie uur; daarna de volledige workload in minder dan vijf minuten.

6. Feb 2018 — Jul 2018

   ABN AMRO

   Data Engineer

   • Bouwde Python/Spark/Hive-pipelines voor DIAL en migreerde Hive-workloads naar PySpark.
   • Automatiseerde een terugkerend Excel-proces: circa drie dagen handwerk per week → een proces van circa drie minuten.

7. Nov 2016 — Jan 2018

   KPN

   Big Data Consultant

   • Leverde en beheerde bare-metal Hortonworks HDP-clusters voor zakelijke klanten, met Hive/Spark ETL en Python/Ansible/Jenkins-automatisering.
   • Bouwde een Robot Framework-suite voor gezondheidscontroles die het team meer dan acht uur handmatige controles per week bespaarde.

8. Oct 2012 — Nov 2016

   KPN

   Network Quality Engineer

   • Verantwoordelijk voor technische validatie en productieacceptatie van telecomoplossingen: ontwerpbeoordeling, tests en operationele overdracht. Gebruikte Python en PostgreSQL voor analyse en automatisering.

9. Jun 2009 — Oct 2012

   Huawei

   Software Test Engineer

   • Leidde tests en oplevering voor een KPN Nederland-cutover van de kernnetwerkdatabase. Het team migreerde 12M abonnees zonder productie-incidenten, na maanden testen en gefaseerde migratieplanning.