Data-engineering

Spreek vóór gegevensinvoer een broncontract af

Redactionele editie · 16 november 2026

Het idee

Een gegevensstroom hangt af van beloften van de bron: welke velden bestaan, hoe records worden herkend en wanneer wijzigingen beschikbaar komen. Een broncontract maakt deze aannames zichtbaar. Dat is vooral nuttig wanneer producent en analyseteam afzonderlijk werken.

Ontwerpkeuze

Documenteer verplichte velden, toegestane bereiken, eigenaarschap en verwachte levertijd. Scheid een structurele fout van een ongebruikelijke maar geldige bedrijfswaarde. Bepaal hoe een afnemer over een geplande onverenigbare wijziging hoort.

Uitgewerkt voorbeeld

Een dagelijkse voorraadbron belooft een vaste artikelidentificatie en een momentopnametijd. Een ontbrekende levering wordt apart gemeld van een geldige momentopname met nul voorraad.

Voor ingebruikname

  • Wijs de broneigenaar aan
  • Onderscheid ontbrekende en lege leveringen
  • Spreek wijzigingsmeldingen af

De voorbeelden zijn illustratief. Pas de controles aan uw eigen omgeving aan.

Bronnen en verdieping

Apache Kafka documentation

Zoek in de bibliotheek