Naarmate de ontwikkelcycli complexer werden, kreeg ASML steeds meer moeite om waarde te realiseren uit hun dataplatform. Het onderhoud van de Bronze-laag vergde aanzienlijke inspanningen, waardoor er minder tijd overbleef voor innovatie en nieuwe toepassingen.

Om deze beperkingen te overwinnen, heeft het RevoData-team het ingestieframework van ASML herontworpen om een efficiëntere en flexibelere basis te creëren. De verbeteringen omvatten het gebruik van Autoloader voor naadloze ingestie, de adoptie van native PySpark-mogelijkheden en de ontkoppeling van configuratie- en schemabeheer voor grotere schaalbaarheid. Deze wijzigingen waren bedoeld om de operationele complexiteit te verminderen en de organisatie in staat te stellen meer middelen te besteden aan hoogwaardiger werk in de Silver- en Gold-lagen.

Het resultaat is een aanzienlijk schaalbaarder en beter onderhoudbaar ingestieframework dat de prestaties verbetert en de handmatige overhead vermindert. Met een gestroomlijnde architectuur op zijn plaats heeft ASML nu meer vrijheid om te innoveren, de ontwikkeling te versnellen en nieuwe datagerichte kansen te benutten.

‍