Med all den brusen om enorme NSA-datasentre som inneholder gazillions av databiter om våre private liv, er det en ting som ikke har blitt snakket om mye, i det minste på CNN. Det innebærer et ingeniørproblem som har dukket opp sammen med skyteknologi, big data og de imponerende fysiske datalagringssentrene som nå bygges over hele verden. Så hva er det? Uansett hvem som administrerer et av de enorme IT-systemene som driver disse fasilitetene, er det behov for programvaresystemer som hjelper alle disse dataene til å komme raskt inn og ut av rørledningen. Dette behovet representerer et av de mest interessante IT-spørsmål eller puslespill fagfolk står overfor i dag.
Som mange eksperter påpeker, går dagens ekstreme etterspørsel etter databehandling langt utover de tradisjonelle tilnærmingene. Enkelt sagt, bruk av enkle databasestrukturer og verktøy som SQL-spørringsgrensesnitt vil ikke gi tilstrekkelig prosessorkraft eller funksjonalitet for slike som de proprietære systemene som har utviklet seg de siste årene. Arkivene til dagens store teknologiselskaper trenger ekstremt skalerbar teknologi. De trenger databehandlingsverktøy som kan legge inn og gi resultater med mye større volum enn hva en enkelt server kan gjøre det lettere. De trenger løsninger som raskt kan forankres for vekst, løsninger som inkluderer komplekse nivåer av kunstig intelligens, løsninger som er designet for enkel styring av en IT-avdeling.
Spørsmålet er, hvordan erobrer selskaper og offentlige etater begrensningene i den tradisjonelle databehandlingsveien? Her skal vi se på et veldig lovende alternativ: Programvare som håndterer big data og administrasjon av flere datasentre.