Op de Strata-conferentie in Londen 2012 spraken auteur en tech-historicus George Dyson over hoe de mensheid in de wereld van high-speed en big data-functionaliteit is gekomen en waar hij de dingen ziet gaan. Dyson begon met zijn eigen idee waarom big data bestaat. De kosten om iets weg te gooien, zei Dyson, begonnen de machinekosten om het te bewaren te overschrijden. En zo werd big data geboren.
Bij het doornemen van enkele van de andere stappen die hebben geleid tot de huidige complexe gegevensopslag- en gegevensverwerkingstechnologieën, onderzocht Dyson enkele primitieve computerblauwdrukken en ideeën over technologie van voorbije eeuwen, zoals schrijven door de Duitse wiskundige en filosoof GW Leibniz in 1679 op een binaire computer, Charles Babbage's 'differentiemotor' en werk van Alfred Smee in het midden van de 19e eeuw, dat een type machine overwoog die zou werken als een moderne zoekmachine. (Meer informatie over het vroegste werk in computerprogrammering in The Pioneers of Computer Programming.)
Op basis van deze ideeën, die hun tijd ver vooruit waren, noemde Dyson Hollerith-kaarten en andere technologieën die enkele van de ideeën begonnen te implementeren die eerder waren beperkt door een gebrek aan beschikbaarheid van technische hardware. Met een grote focus op het baanbrekende werk van Alan Turing op gegevensinvoer en -uitvoer, verwijst Dyson ook naar John von Neuman en het Manhattan Project als een samenwerking waarbij veel gegevens op specifieke manieren moesten worden verwerkt.
Bovendien schetst Dyson enkele van de principes die andere 20e-eeuwse wetenschappers zoveel hebben bereikt, zelfs met een zeer beperkte hoeveelheid geheugen. Dyson noemde het moderne computersysteem daarentegen 'inefficiënt', omdat gegevens op een lineaire manier worden verwerkt, met een specifiek adres voor elk stuk gegevens. Onder verwijzing naar Von Neuman's filosofie van procedurele codering en andere ideeën over technische vooruitgang, drong Dyson aan op een vernieuwing van hoe ontwikkelaars gegevens gebruiken, en een beweging in de richting van principes zoals driedimensionaal computergebruik, pulsfrequentiecodering en de overweging van analoge technologieën die veel op het menselijk brein.
Deze video biedt een rijke geschiedenis van gegevensopslag en gegevensverwerking. Door dit te doen, fungeert het ook als een krachtige aanklacht tegen een "verbeeldingscrisis" die het tij van toekomstige technologische innovatie kan tegenhouden.
