BigData expo 2024

Op 11 september 2024 heb ik, Gerco, de BigData expo bezocht. Ik had een VIP-kaart besteld, zodat je voorrang hebt bij de sessies en ja, ook wat lekkers kon halen de dag door bij de VIP-area.

Uiteraard was AI het thema dat vooral terugkwam in alle praatjes. Ik vond met name het verhaal van de ANWB heel inspirerend. Zij hebben een Datamesh-architectuur ontwikkeld met Snowflake als centraal DWH. Hierbij hebben ze de bestaande situatie goed meegenomen in het plaatje. Ze hebben verschillende afdelingen zoals pechhulp, verzekeringen, reizen, etc., die ieder hun eigen domein hebben gekregen met binnen dat domein ook de bestaande technologie, zodat niet alles op zijn kop gaat. Er wordt tussen de domeinen en het centrale DWH gecommuniceerd met behulp van Snowflake.

Ook datavirtualisatie kwam terug in een aantal sessies. Een prachtig concept, dat virtuele DWH: iedereen die gebruik maakt van een datafundament met gedeelde definities en geen onnodig gekopieer van data. Zeer handig ook bij migraties.