Pröva metoden. Bevara beläggen.

1. 01Skriv frågan, godkännandekriterierna och stoppregeln innan du ser resultaten.
2. 02Dokumentera datakälla, licens, version, tidsstämplar, tidszon och justeringar. Välj urvalet med information som fanns vid tidpunkten.
3. 03Dela data kronologiskt. Anpassa variabler, skalning och trösklar enbart med träningsdata.
4. 04Lämna sluttestet orört. Utvärdera rullande med enbart tidigare data; dokumentera överlappande horisonter och beroenden.
5. 05Jämför med enkla referenser för samma datum, mål och kostnadsantaganden.
6. 06Ta med avgifter, spread, prisglidning och utförandebegränsningar. Ett stopp garanterar inte avslut vid det priset.
7. 07Logga alla modeller, marknader, trösklar och horisonter som prövats. Beakta multipla tester i stället för att bara rapportera bästa varianten.
8. 08Redovisa urvalsstorlek, osäkerhet, nettoresultat och nedgång från topp. En hög träffsäkerhet visar inte ensam en fördel.
9. 09Kontrollera stabilitet över perioder och förhållanden. Förklara negativa resultat och möjliga felsituationer.
10. 10Arkivera datareferenser, kod, inställningar, slumpfrön och utdata. Granska påståenden och risker före publicering.

Experimentjournal

Fråga och beslutsregel

 

Data, licens och period

 

Träning / validering / sluttest

 

Referens och kostnader

 

Alla prövade varianter

 

Resultat, osäkerhet och begränsningar

 

Nästa beslut och granskare