Data-pipelines (datafriskhet)
Så håller vi svensk fastighetsdata uppdaterad — slutpriser veckovis, till-salu dagligen.
För att Elly ska kunna ge mäklare aktuella matchningar och prisjämförelser måste vår fastighetsdata vara fräsch. Två schemalagda pipelines sköter detta: en för historiska slutpriser, en för aktiva listings. Båda kör autonomt i molnet.
Slutpriser (historisk data)
- •Frekvens: veckovis
- •Volym: tusentals nya slutpriser per körning
- •Skrivs till: relationell databas + objektslagring (för historiska CSV:er)
- •Används för: prisjämförelser, områdes-trender, mäklare-prestation
- •Monitor: dedikerad observability-dashboard
Aktiva listings (till-salu-data)
- •Frekvens: dagligen, timvis under peak
- •Delta-only writes: bara nya/uppdaterade URL:er processas
- •Uppdaterar: relationell databas + vektorlager (för matchning mot spekulanter)
- •Pipeline-hälsa loggas till dedikerat audit-table
Robusthet
- •Checkpoint-system: resume från senaste lyckade URL vid restart
- •Idempotenta writes: samma URL kan re-processas utan duplikat-rader
- •Exponential backoff på temporära fel från källan
- •Fail-safe: enskilda URL-fel stoppar inte hela körningen, loggas separat
- •Dead letter queue: URL:er som upprepat misslyckats läggs i manuell granskning
Läs vidare
Vill du se Elly i din vardag?
30 minuter där vi kör henne på dina objekt och spekulanter. Inga säljpitcher.