Bart Data Expo 2024

Transcript

1. Succesvol van legacy naar cloud Bart Manintveld 12 september 2024
2. Onze data transformatie ‘On premise’ DWH naar Cloud ReConnect
3. Businessmodel 3 Professional Klant Recruiter Accountmanager
4. 4 Dekkingsbijdrage € / uur Dekkingsbijdrage € / uur Businessmodel Professionals Klanten Recruiter Accountmanager
5. Business model 5
6. Business model 6 Ambitie: Digital leader worden
7. Business model 7 Ambitie: Digital leader worden Digital Matching
8. 8 • Eén SQL Server VM • Heel veel databases, met deels afgemaakte data warehouses • Veel paginated reports • Meeste reports direct op tabellen uit bronsysteem, geladen met SSIS pipelines Het datalandschap vijf jaar geleden…
12. Datagedreven cultuur wordt sterk gepusht vanuit de directie Snel succes laten zien Van een versplinterd datalandschap naar één waarheid in de dashboards. Data team, business-gefocust team van mensen met T-shaped profielen Successen
16. Waarom worden dashboards niet gebruikt? ”Het werkt niet” “Het klopt niet” “Ik kan het niet vinden” • Locatie dashboard onbekend • Gebruiker weet niet hoe hij/zij het dashboard moet gebruiken • Onduidelijkheid over wat er in het dashboard staat: verschillen in de betekenis van getallen en definities
17. Veel performance problemen bij verwerken grote datavolumes en regelmatige verversingen Geen scheiding tussen ontwikkel- en productieomgeving + ingewikkelde data lineage = veel uitval Niet iedereen kent de dashboards en mogelijkheden met data Mislukkingen
18. Onze data transformatie ‘On premise’ DWH naar cloud ReConnect
19. Waarde uit data vanuit 5 invalshoeken: Strategie Technologie Data Mensen Proces
20. SNELST AANBIEDEN Data moet up to date en makkelijk beschikbaar zijn voor een slagvaardige recruitment organisatie DIGITAL LEADER WORDEN Maandag maakt inhaalslag. Dit genereert meer data en informatieproducten die goed ontwikkeld, beheerd en waardevol ingezet moeten worden MARKTLEIDER PUBLIC De meeste klanten en profielen betekent potentiëel de grootste data goudmijn  Pole position voor digital matching, slim inzicht en advies Positionering Maandag: Wat betekent dit voor Data?
21. Data verzilveren via een toekomstbestendige basis Modern Cloud Data Platform inrichten Master Data Management opzetten Datakwaliteit programma starten
22. Voordelen nieuw platform  Schaalbaar: opschalen bij verwerking grotere hoeveelheden data of intensieve berekeningen. Daarna weer afschalen.  KPI sturing dichter bij business. Meer real time dashboards door snellere verversing.  Toekomstbestendig: nieuwe bronnen ontsluiten gaat sneller. Dat is handig bijvoorbeeld bij overnames.
23. Data fundament Datamodel verbeteren Dataplatform naar de cloud Power BI naar de cloud Master Data uniformeren Digital leader Digital matching Marketing automation HR Analytics Business Intelligence Mensen / Proces Data fundament Adoptieplan dashboards Data kwaliteit programma Matching Marktplaats Academy analytics New business Advanced Analytics Service dashboard Salesfunnel dashboards Cloud Data Platform nodig Roadmap
24. Cloud Data Platform | Azure Data Lake + SQL DB Power BI Reports Azure Data Factory (batch data) Data Assets store raw data Ingest Store Consume Store / Model / Serve Power BI Dashboards Other sources Navision Fysieke verplaatsing Legenda Virtueel External systems Azure Data Lake Storage Raw Data Data Warehouse Monitor & Govern 3 omgevingen (ontwikkel, acceptatie, test) met daartussen een release proces.
25. Aanpak Cloud Platform klaarzetten Data Assessment Data Strategie Werkstroom 1 Nazorg Werkstroom 2 Metadata- gedreven staging laag POC op nieuw platform Datamodel opschonen Rapporten uitfaseren Rapporten aansluiten op nieuw datamodel • Definitieve architectuurkeuze • Ontwikkelstop Extra bronnen aansluiten Staging optimaliseren DWH objecten migreren Go-live + training 2 maanden ~ 7 maanden 3 maanden
27. Betrouwbaarheid DWH enorm verbeterd door ontwikkel- en productiescheiding, en het release proces Veel sneller kunnen ontwikkelen door opschonen data lineage en metadata-gebaseerde staging laag Veel losse rapporten uitgefaseerd en vervangen door meer gebruiksvriendelijke dashboards Meer kennis aanwezig in het team door refactoring en code reviews Successen
28. Langzamer release proces dan voorheen. Van ‘continuous integration’ naar één release per week Gekozen architectuur schaalbaar en toekomstbestendig? Mislukkingen
29. Onze data transformatie ‘On premise’ DWH naar Cloud ReConnect
32. Cloud data platform | Snowflake + DBT
35. Voordelen van DBT: Veel meer inzicht in data lineage Makkelijk te gebruiken data tests geven controle over data- en codekwaliteit Snelheid van ontwikkelen door één programmeeromgeving met code, resultaten, versiebeheer, lineage Snowflake en CI/CD: Sneller tussentijds kunnen releasen Successen
36. Mislukkingen?
37. Bedankt voor je aandacht. btmanintveld@gmail.com bart.manintveld@the-future-group.com +31 (0)6 83 29 39 36
38. Appendix
39. Toekomstige positionering Maandag: Wat betekent dit voor Data? PEOPLE & ACADEMY PIJLER Maandag helpt professionals groeien. Op basis van data uit een verrijkt profiel bieden we actief content, advies en opleidingen aan. DIGITAL LEADER Maandag onderscheid zich door best-in-class digitale dienstverlening aan klanten. Actuele en kloppende data maakt digital matching mogelijk en inzicht in de inhuur. BUY & BUILD Maandag diversifieert qua bedrijfsmodellen en groeit door overnames. Data van deze bedrijven moet snel worden geïntegreerd en benut.