Q:
Hoe kunnen bestaande datawarehouse-omgevingen het beste worden geschaald om te voldoen aan de behoeften van big data-analyse?
EEN:Individuele datawarehouse-projecten moeten geval per geval worden beoordeeld. Over het algemeen is er een kernproces om uit te zoeken wat er moet worden gedaan om een bestaand datawarehouse-ontwerp uit te rekken om big data-analyse beter te kunnen verwerken. IT-professionals kunnen dit "opschalen" of "opschalen" noemen.
| Webinar: Big Iron, Meet Big Data: Mainframe-gegevens bevrijden met Hadoop & Spark Registreer hier |
Bij schaalvergroting wordt meestal gekeken naar voldoende verwerkingskracht, voldoende geheugen en krachtigere serveractiviteiten om alle grotere gegevenssets te verwerken die het bedrijf zal verwerken. Schaalvergroting kan daarentegen betekenen dat clusters van serverhardware worden verzameld en met elkaar worden verbonden om big data te corrigeren.
Sommige IT-experts hebben gesuggereerd dat de meest gebruikelijke methode met Apache Hadoop en andere populaire big data-tools en -platforms is om hardware uit te schalen en te clusteren om de gewenste effecten te bereiken. Anderen wijzen er echter op dat met de huidige technologie een datawarehouse kan opschalen met behulp van een inkoopstrategie die middelen toevoegt aan een server, bijvoorbeeld door een groter aantal processorkernen en een grotere hoeveelheid RAM te verkrijgen.
Of ze nu opschalen of opschalen, datawarehouses hebben extra fysieke hardwareactiva nodig om de grotere dataworkloads aan te kunnen. Ze hebben ook extra menselijke administratie nodig, wat meer training voor interne teams betekent. Veel planning moet in het project worden gestoken om te bepalen wat voor soort stress en druk de grotere data-workloads zullen hebben op een bestaand legacy-systeem om het uit te rusten voor een nieuw big data-ecosysteem. Een groot probleem zijn knelpunten in de opslag, waarvoor upgrades naar opslagcentra nodig zijn, en andere soorten knelpunten in de prestaties die een opkomend systeem kunnen doen hobbelen als ze niet worden aangepakt.
