News

Soundbyte 99: Search, Store & Scale

23 juni 2013

Het lijkt wel alsof iedereen dit weekend het meeste geschikte weekend voor activiteiten vindt. Zo hadden wij dit weekend een bedankt-barbeque voor alle vrijwilligers van onze plaatselijke voetbalclub, was Luminis Apeldoorn uitgelopen voor het jaarlijkse social weekend met partners, vond de 81ste 24 uurs race van le Mans plaats, had mijn oudste zoon (10) een (niet) slapen feestje en vierde mijn jongste zoon zijn 4e verjaardag. Druk en dus moesten we keuzes maken en toen viel de voetbalclub en tot mijn grote spijt ook de 24 uur van le Mans af (maar Bert en Marcel… volgende jaar wordt hij weer gereden, maar hij was dit jaar wel erg spannend en spectaculair). De uitkomst: mijn oudste zoon heeft een volledige slapeloze nacht doorgehaald, mijn jongste zoon is 4 geworden en heeft dit uitbundig gevierd en we hebben één dag van het social weekend van Luminis Apeldoorn mee mogen maken. En volgens mij was het weekend wel geslaagd. We hebben een goede, leuke en enthousiaste club mensen bij elkaar.

Dit bleek ook al op de laatste SIS meeting van Apeldoorn, waar het over ‘Enterprise Search‘ ging. Vrijwel iedereen was aanwezig, was enthousiast, geïnteresseerd en werden er goede vragen gesteld. Een geslaagde avond dus. Door het uitgebreide onderwerp, hebben we besloten om het praktische gedeelte iets langer te maken en het niet gelijk met de theorie te doen, maar het op een andere datum op kantoor Apeldoorn te doen. Daar is het internet ook een tikje beter en sneller, dan op de Scherpenbergh en dat helpt wel als je complete websites gaat indexeren. We zullen het praktische gedeelte na de grote vakantie doen, ergens eind Augustus of in September. Gezien de enthousiaste reacties verwacht ik wel een grote opkomst.

Je merkt aan alles dat het onderwerp ‘search’ nog steeds hot is, maar tijdens ‘Berlin Buzzwords‘ conferentie van begin juni dit jaar blijkt toch wel dat ‘search’ zelf een ‘commodity’ aan het worden is. De wereld kruipt langzamerhand richting de volgende fase, waarin allerlei invloeden van buitenaf het zoeken kan beïnvloeden. Je hoort termen als semantic search, waarbij semantische technologie wordt ingezet voor, tijdens en na de daadwerkelijke zoekactie en social search, waarbij invloeden van sociale media het zoeken kan beïnvloeden. Zo worden documenten, die ook door anderen worden gelezen en eventueel goed worden beoordeeld, als relevanter beschouwd. Je ziet dan ook dat de community en de suppliers zich steeds meer richten op recommendation, in mijn ogen een logisch vervolg. Hoe meer informatie er binnen en buiten de zoekdienst wordt gebruikt voor, tijdens en na het zoeken en hoe meer er bekend is van de gebruiker, hoe beter de zoekresultaten kunnen worden afgestemd op de gebruiker.

Tijdens de ‘Berlin Buzzwords’ ging het over ‘search, store and scale’. Hans Gringhuis en ik hebben in twee dagen een grote hoeveelheid sessies gevolgd over search, recommendation en big data en de bijbehorende technologieën en producten als Solr, Elastic Search, NoSQL, Mahout, Hadoop en anderen. Het is iets kleinschaliger dan de TechED’s van Microsoft en de JavaONE’s van Oracle (zo’n 500 deelnemers), maar het was zeker de moeite waard. De onderwerpen hebben ons weer bevestigd dat we binnen Apeldoorn met de juiste speerpunten bezig zijn.

Wat mij persoonlijk opviel was de stammenstrijd die er gaande is tussen Elastic Search en Solr. Beide zijn gebaseerd op Lucene, maar dienen wel een ander publiek. Elastic Search profileert zich met name op schaalbaarheid, waar Solr zich meer op functionaliteit focust. Of dit verschil zo blijft valt in mijn ogen nog te betwijfelen. Elastic Search voegt in een rap tempo nieuwe functionaliteit toe, en Solr heeft met haar 4.X versie de cloud en schaalbaarheid tot een speerpunt gebombardeerd. Beide technologieën zijn uitermate interessant en bruikbaar en ik zal zeker de ontwikkelingen, die beide producten doormaken, blijven volgen.

Mijn meest favoriete sessie was echter: Scaling the other way: Elastic Search in Miniature. De spreker, Rashid Khan, toonde hierbij de clustering mogelijkheden van Elastic Search, door een vijftal RaspBerry Pi’s met draadloos internet en met Elastic Search geïnstalleerd de zaal rond te laten gaan. Deze vijf Raspberry Pi’s vormden samen een mini Elastic Search cluster en de spreker toonde hiermee op een geweldige en indrukwekkende manier de schaalbaarheid mogelijkheden van Elastic Search. Ik werd hierbij zo enthousiast dat ik vrijwel meteen bij thuiskomst een Raspberry Pi heb aangeschaft om te kijken of de Luminis zoekdienst erop kon worden geïnstalleerd, maar daarover meer in een volgende Soundbyte.

Alle sessies van de Berlin Buzzwords conferentie zijn opgenomen en kunnen online worden bekeken. Ik eindig dan ook met de Raspberry Pi sessie van Elastic Search. Succes met kijken.

Nog een prettige week…

MarcHet lijkt wel alsof iedereen dit weekend het meeste geschikte weekend voor activiteiten vindt. Zo hadden wij dit weekend een bedankt-barbeque voor alle vrijwilligers van onze plaatselijke voetbalclub, was Luminis Apeldoorn uitgelopen voor het jaarlijkse social weekend met partners, vond de 81ste 24 uurs race van le Mans plaats, had mijn oudste zoon (10) een (niet) slapen feestje en vierde mijn jongste zoon zijn 4e verjaardag. Druk en dus moesten we keuzes maken en toen viel de voetbalclub en tot mijn grote spijt ook de 24 uur van le Mans af (maar Bert en Marcel… volgende jaar wordt hij weer gereden, maar hij was dit jaar wel erg spannend en spectaculair). De uitkomst: mijn oudste zoon heeft een volledige slapeloze nacht doorgehaald, mijn jongste zoon is 4 geworden en heeft dit uitbundig gevierd en we hebben één dag van het social weekend van Luminis Apeldoorn mee mogen maken. En volgens mij was het weekend wel geslaagd. We hebben een goede, leuke en enthousiaste club mensen bij elkaar.

Dit bleek ook al op de laatste SIS meeting van Apeldoorn, waar het over ‘Enterprise Search‘ ging. Vrijwel iedereen was aanwezig, was enthousiast, geïnteresseerd en werden er goede vragen gesteld. Een geslaagde avond dus. Door het uitgebreide onderwerp, hebben we besloten om het praktische gedeelte iets langer te maken en het niet gelijk met de theorie te doen, maar het op een andere datum op kantoor Apeldoorn te doen. Daar is het internet ook een tikje beter en sneller, dan op de Scherpenbergh en dat helpt wel als je complete websites gaat indexeren. We zullen het praktische gedeelte na de grote vakantie doen, ergens eind Augustus of in September. Gezien de enthousiaste reacties verwacht ik wel een grote opkomst.

Je merkt aan alles dat het onderwerp ‘search’ nog steeds hot is, maar tijdens ‘Berlin Buzzwords‘ conferentie van begin juni dit jaar blijkt toch wel dat ‘search’ zelf een ‘commodity’ aan het worden is. De wereld kruipt langzamerhand richting de volgende fase, waarin allerlei invloeden van buitenaf het zoeken kan beïnvloeden. Je hoort termen als semantic search, waarbij semantische technologie wordt ingezet voor, tijdens en na de daadwerkelijke zoekactie en social search, waarbij invloeden van sociale media het zoeken kan beïnvloeden. Zo worden documenten, die ook door anderen worden gelezen en eventueel goed worden beoordeeld, als relevanter beschouwd. Je ziet dan ook dat de community en de suppliers zich steeds meer richten op recommendation, in mijn ogen een logisch vervolg. Hoe meer informatie er binnen en buiten de zoekdienst wordt gebruikt voor, tijdens en na het zoeken en hoe meer er bekend is van de gebruiker, hoe beter de zoekresultaten kunnen worden afgestemd op de gebruiker.

Tijdens de ‘Berlin Buzzwords’ ging het over ‘search, store and scale’. Hans Gringhuis en ik hebben in twee dagen een grote hoeveelheid sessies gevolgd over search, recommendation en big data en de bijbehorende technologieën en producten als Solr, Elastic Search, NoSQL, Mahout, Hadoop en anderen. Het is iets kleinschaliger dan de TechED’s van Microsoft en de JavaONE’s van Oracle (zo’n 500 deelnemers), maar het was zeker de moeite waard. De onderwerpen hebben ons weer bevestigd dat we binnen Apeldoorn met de juiste speerpunten bezig zijn.

Wat mij persoonlijk opviel was de stammenstrijd die er gaande is tussen Elastic Search en Solr. Beide zijn gebaseerd op Lucene, maar dienen wel een ander publiek. Elastic Search profileert zich met name op schaalbaarheid, waar Solr zich meer op functionaliteit focust. Of dit verschil zo blijft valt in mijn ogen nog te betwijfelen. Elastic Search voegt in een rap tempo nieuwe functionaliteit toe, en Solr heeft met haar 4.X versie de cloud en schaalbaarheid tot een speerpunt gebombardeerd. Beide technologieën zijn uitermate interessant en bruikbaar en ik zal zeker de ontwikkelingen, die beide producten doormaken, blijven volgen.

Mijn meest favoriete sessie was echter: Scaling the other way: Elastic Search in Miniature. De spreker, Rashid Khan, toonde hierbij de clustering mogelijkheden van Elastic Search, door een vijftal RaspBerry Pi’s met draadloos internet en met Elastic Search geïnstalleerd de zaal rond te laten gaan. Deze vijf Raspberry Pi’s vormden samen een mini Elastic Search cluster en de spreker toonde hiermee op een geweldige en indrukwekkende manier de schaalbaarheid mogelijkheden van Elastic Search. Ik werd hierbij zo enthousiast dat ik vrijwel meteen bij thuiskomst een Raspberry Pi heb aangeschaft om te kijken of de Luminis zoekdienst erop kon worden geïnstalleerd, maar daarover meer in een volgende Soundbyte.

Alle sessies van de Berlin Buzzwords conferentie zijn opgenomen en kunnen online worden bekeken. Ik eindig dan ook met de Raspberry Pi sessie van Elastic Search. Succes met kijken.

Muziek
We hebben deze keer besloten om nu eens niet met de auto richting Berlijn te gaan, maar om de trein te pakken. Ik vond dat een uitstekende keuze. In nog geen 4.5 uur stonden we compleet uitgerust in hartje Berlijn. Een aanrader wat mij betreft. Ik vond de volgende video daarom wel enigszins passend bij deze Soundbyte. Het gaat om “Autobahn” van de band Kraftwerk. Ik heb besloten de originele volle versie van ruim 22 minuten te laten zien. Zit niet echt een goede video bij, maar als je eventjes Googled kun je vast nog veel meer versies van dit nummer vinden. Have fun:

Nog een prettige week…

Marc

One Response to Soundbyte 99: Search, Store & Scale

  1. Bert Breeman says:

    Marc,

    Goed verhaal en goede muziek, want ‘Autobahn’ is nu inmiddels voor 2e keer opgedoken in een Soundbyte (zie sounbyte 77: http://www.luminis.eu/soundbyte-77-autobahn/)

Geef een reactie

Het e-mailadres wordt niet gepubliceerd. Vereiste velden zijn gemarkeerd met *