1/ Cruncher Spotlight #8 — ADIA Lab Strukturell Bruddutfordring Møt Abhishek Gupta (Data Scientist @ TraceLink), som kom på 8. plass i $100k Structural Break Challenge på Crunch. Her er intuisjonen bak tilnærmingen hans — ingen tung matematikk nødvendig. 👇

2/ Først: hva er et «strukturelt brudd»? Det er når en tidsserie stille endrer sin atferd — som et marked som endrer regimer, en sensor som driver, eller et helsesignal som snur. Samme skjema, andre regler under.

3/ Hvis du går glipp av pausen: Værmeldingene blir sprø Modeller blir ustabile Beslutninger tas basert på gårsdagens virkelighet Brudddeteksjon dukker opp overalt: finans, klima, helsevesen, industridrift.

4/ Utfordringens innramming var enkel: Du får en tidsserie og et markert grensepunkt. Spørsmål: Ser dataene før og etter det punktet ut som om de kom fra samme prosess... Eller ikke?

5/ Abhisheks viktigste trekk: ikke tving én modell til å forklare alle typer serier. Datasettet hadde ulike «personligheter» (glatt, støyende, bursty, tunghalet, autokorrelert). Så han grupperte tidsserier i klynger (typer), og brukte deretter en skreddersydd detektor for hver.

6/ For mange klynger var den beste "modellen" bare en enkelt sterk score: Tenk: «Hvor mye bedre passer serien som to segmenter sammenlignet med ett sammenhengende segment?» Det er i bunn og grunn en likelihood-ratio-sammenligning, ren og vanskelig å spille.

7/ For andre klynger brukte han lett ML (logistisk regresjon / treensembler / gradient boosting) på funksjoner som fanger hvordan serien endres: - endringer i gjennomsnitt/skala - hopp og burstiness - haleatferd - fordelingsforskjeller nær grensen

8/ Inn kommer kalibrering. Når du kjører forskjellige detektorer for forskjellige klynger, kan poengsummene deres ligge på forskjellige skalaer. Derfor la han til et kalibreringslag for å justere dem globalt, og dermed forbedre den totale rangeringsytelsen (AUC).

9/ Meta-leksjonen er veldig Crunch: Robust ytelse kommer ofte fra klare sammenligninger + varierte funksjoner + stabile modeller, ikke tung arkitektur. Også: han gjorde dette uten hyperparameterjustering.