Organisaties produceren en bewaren steeds meer data om deze nu of op een later moment te analyseren. De traditionele relationele database-managementsystemen, waar nog veel bedrijven gebruik van maken, kunnen echter slecht overweg met grote hoeveelheden semi-gestructureerde en ongestructureerde data zoals logdata, sensor-data en social media (waaronder Google Adwords en Analytics, Twitter en Facebook). Nieuwe ecosystemen van oplossingen vanuit de Open Source Community, bekend onder de verzamelnamen ‘Hadoop’ en ’NoSQL’, alsmede zogenaamde ‘Big Data’-platformen, bieden perspectief.
Vooral overheidsinstellingen, financiële dienstverleners en bedrijven in de (tele)communicatiesector hebben al te maken met de verwerking van grote hoeveelheden verschillende datatypen. Traditionele databases bieden echter beperkte schaalbaarheids- en opslagmogelijkheden voor de explosief groeiende berg semi- en ongestructureerde data. Voor dergelijke organisaties kan de overstap naar een ‘NoSQL’-database dan ook de oplossing zijn. Bovendien zijn er inmiddels ook ‘Big Data’-platformen ontstaan, die goed overweg kunnen met zowel de oude als de nieuwe situatie. Daarmee kunnen deze platformen o.a. een transitie van data faciliteren naar de nieuwe ecosystemen.
Voordelen van Big Data-platformen
- Ze zijn toegespitst op verwerking en opslag van grote hoeveelheden ongestructureerde en semi-gestructureerde data en complexe datatypes.
- Deze platformen maken hoge snelheid van dataopslag en -verwerking mogelijk.
- Oplossingen zijn eenvoudig beschikbaar omdat ze vanuit een ‘open source’-model worden ontwikkeld.
- Er is veel aandacht voor de ontwikkeling en ondersteuning van het nieuwe ecosysteem, waardoor zowel deze systemen als de Big Data-platformen snel volwassen worden.
Overstappen naar een Big Data-omgeving?
Bij de transitie naar een Big Data-platform is het belangrijk om rekening te houden met een aantal zaken:
- De connectiviteit tussen de applicaties en de NoSQL-database.
- Het modelleren van de data en datastructuren.
- Kennis in de organisatie m.b.t. operationeel beheer van o.a. NoSQL-databases en/of Hadoop.
- Migratie van het huidige dataplatform naar het nieuwe Big Data-platform.
Een succesvolle start
De eerste stap voor een succesvolle transitie is het opzetten van een pilot-omgeving. Zo kunnen gebruikers vertrouwd raken met het nieuwe Big Data-platform. Als na de pilotfase definitief besloten wordt om te migreren naar het nieuwe platform, moet bepaald worden hoe de data vanuit de relationele database kan worden gemigreerd en welke strategie daarbij past.
Transitie naar een Big Data-omgeving: onze strategie
Met een jarenlange ervaring op het gebied van data-integratie kan cimt organisaties helpen bij de transitie naar een Big Data-platform. Hierbij kan een stapsgewijze aanpak een goede strategie zijn. Data vanuit één applicatie of database wordt gemigreerd naar de Big Data-omgeving. Klein beginnen en steeds een stapje verder, voor een optimaal resultaat in een relatief kort tijdsbestek.
Meer lezen over de transitie naar een Big Data-omgeving? Download dan onze whitepaper.