Een dataplatform herontwerpen en herbouwen

Tijdens de implementatie van het herbruikbare dataplatform van Nationale-Nederlanden voor een businessunit werd duidelijk dat het platform niet aan de eisen voldeed. Ons team ontwierp en bouwde een nieuw dataplatform met Terraform, Databricks, Synapse, Purview, Great Expectations en Data Lake Storage Gen2, implementeerde geautomatiseerd infrastructuurtesten en verbeterde de CI/CD-pijplijnen. Het project eindigde met een succesvolle implementatie van het platform.

Als data engineer was ik verantwoordelijk voor het ontwerpen van de infrastructuur, het herbouwen van de ETL, het verbeteren van CI/CD, kennisdeling en het implementeren van de datakwaliteitscomponent.