Partitionering verdeelt een dataset in beheersbare groepen die zoekopdrachten kunnen selecteren. Een nuttige sleutel beperkt onnodig lezen. Een te gedetailleerde sleutel kan veel kleine fragmenten maken en metadata- en onderhoudswerk vergroten in plaats van prestaties verbeteren.
OpslagOpslag
Betrouwbare routes van bronrecord naar bruikbare dataset.
Analytische vragen lezen vaak enkele velden over veel rijen. Kolomopslag groepeert waarden per kolom en kan zo onnodig lezen beperken en passende gegevens beter comprimeren. Dat is een ander toegangspatroon dan telkens één volledig record bijwerken.
OpslagEen dataset wordt niet automatisch nuttiger doordat elk historisch record bewaard blijft. Bewaarbeleid koppelt opslagduur aan een doel. Het moet naast de bron ook afgeleide tabellen, exports, caches en reservekopieën omvatten.
OpslagEen analyse moet kunnen aangeven welke toestand van een dataset zij gebruikte. Een momentopname biedt een vaste referentie terwijl wijzigingen elders doorgaan. Zonder geversioneerde invoer kan dezelfde code om andere redenen toch een ander resultaat opleveren.
OpslagHerkomstrelaties beschrijven hoe een dataset of resultaat afhangt van bronnen en transformaties. Zij helpen bepalen welke rapporten geraakt worden door een veldwijziging of mislukte import. Bruikbare herkomstinformatie ondersteunt een actie en is meer dan een grote tekening.
Opslag