Een blog over big data?

Een blog over big data bij de architectuur assistent? Is big data een hype die we ook vanuit data architectuur moeten beschouwen? Is er niet voldoende te doen op het vlak van data architectuur? Allemaal vragen die opkomen bij het schrijven van deze blogtekst.

Big data is zeker een hype, het wordt door veel (commerciele) organisaties gezien als een silver bullet voor het verkopen van producten en diensten. Daarnaast zie je veel organisaties gaan experimenteren met Big Data. Projecten die niet zonder risico zijn want introduceren van Big Data projecten voor het analyseren en combineren van veel data zijn waarschijnlijk veel complexer dan de bestaande data ontsluitings trajecten. En die traditionele trajecten zijn al niet allen even succesvol.

Daarom kan een data architect wellicht een positieve bijdrage leveren aan organisaties die aan de slag willen gaan met Big Data. Nu vind ik zelf het aspect van "Big" in deze big data projecten niet eens zo interessant. Wel de inzet van nieuwe technologieen en concepten als cloud diensten, data analytics, NoSQL en MapReduce algoritmen.

Over deze onderwerpen wil ik dan ook de komende periode een blog gaan schrijven. De komende periode ben ik betrokken bij twee pilots waarin Big Data technieken en concepten een rol spelen. Ten eerste een project waarbij logging in een omvangrijke keten van service georienteerde systemen ingericht moet worden. Ten tweede een pilot waarbij text mining op basis van big data- en relationele databases met elkaar vergeleken worden in een DotNet omgeving. Hierbij wordt met name gekeken naar datamodellering, inzet van NoSQL concepten in DotNet en het ontstaan van een explosie aan associaties tussen elementen. In een volgende blog zal ik nader ingaan op deze pilot.

Ik hoop dat je geinteresseerd bent in deze blog. Wil je een update ontvangen van de architectuurassistent schrijf je dan in op onze emailing lijst dan ontvang je maandelijks een notificatie van onze nieuwe content