Hoe moet u omgaan met al die data?

Volgens berekeningen van IDC worden er dit jaar wereldwijd 0,988 Zettabytes (1.000.000.000.000.000.000.000 bytes) aan data geproduceerd. Dat zijn genoeg gegevens om twee stapels boeken tussen de zon en Pluto neer te zetten.

En deze content-explosie wordt alleen maar groter, stelt Whit Andrews, vice-president en analist bij Gartner. "Het is anekdotisch bewijs, maar de schatting is dat bedrijven elk jaar weer 50 tot 100 procent meer content moeten opslaan. Daar komt nog eens bij dat er steeds weer nieuwe formaat-types bijkomen, omdat gebruikers nu ook audio, video en grafische documenten gebruiken."

Andrews voorspelt dat de groei alleen maar zal versnellen. En tegelijkertijd verwachten gebruikers toegang tot al die data die van een Google-achtige kwaliteit moet zijn – voor alle formaten en zowel binnen als buiten de organisatie.

Zoekmarkt

De schaal en complexiteit van deze informatie-overload waarmee bedrijven te kampen hebben, heeft ervoor gezorgd dat de zoekindustrie een gezonde groei heeft doorgemaakt tijdens de recente recessie, stelt Sue Feldman, vice president search bij IDC. "Vendors melden goede verkopen."

Een nieuw rapport van de Europese Commissie schat de omvang van de zoekindustrie op 831 miljoen euro in 2008. De sector heeft een groeipotentieel van 10 tot 15 procent per jaar tot 2013.

De enterprise search-markt bestaat uit bedrijven als IBM (sinds de overname van DataMirror in 2007), Autonomy, Microsoft (dat in 2008 Fast Search en Transfer overnam), Google en Endeca.

Consolidatiefase

Gartner stelt dat deze sector in een consolidatiefase zit. Die consolidatie heeft echter nog geen grote gevolgen gehad voor de search-markt. "In de laatste jaren zijn er maar weinig search-technologieën verdwenen vanwege acquisities", zegt Andrews.

"Autonomy ondersteunt bijvoorbeeld nog steeds enkele Verity K2-implementaties. Ook al is het inmiddels vijf jaar geleden sinds de overname plaatsvond. De kans is groter dan ondersteuning verdwijnt doordat een aanbieder verdwijnt dan doordat een provider wordt overgenomen. Mogelijke oplossingen zijn gebruik van open source."

Paul O'Hogan van IBM is het daarmee eens. Open standaarden (zoals het vorig jaar goedgekeurde OAIS Unstructured Information Management Architecture, UIMA) en open source-projecten (zoals Apache Lucence) zijn volgens hem essentieel.

Social search

Daarnaast voorspelt O'Hogan dat er steeds meer nadruk zal komen te liggen op 'social search'. Het is een mening die wordt gedeeld door Dale Vile, managing director van Freeform Dynamics. Hij denkt dat bedrijven social-media-omgevingen steeds serieuzer nemen.

"In de wereld van Enterprise 2.0 moeten bedrijven beschikken over zoektechnologie die niet alleen zaken vindt, maar ook rekening houdt met de waarde van de data die wordt gevonden."