Toets de methode. Bewaar het bewijs.

1. 01Leg de vraag, acceptatiecriteria en stopregel vast voordat je resultaten ziet.
2. 02Noteer herkomst, licentie, versie, tijdstippen, tijdzone en aanpassingen van de data. Selecteer het universum met destijds beschikbare informatie.
3. 03Splits data chronologisch. Pas kenmerken, schaling en drempels uitsluitend op trainingsdata aan.
4. 04Laat de eindtoets onaangeroerd. Evalueer voortschrijdend met alleen eerdere data; documenteer overlappende perioden en afhankelijkheid.
5. 05Vergelijk met eenvoudige referenties op dezelfde data, doelen en kostenaannames.
6. 06Neem vergoedingen, spread, slippage en uitvoeringsbeperkingen mee. Een stopprijs garandeert geen uitvoering tegen die prijs.
7. 07Registreer elk getest model, elke markt, drempel en horizon. Houd rekening met meervoudig toetsen in plaats van alleen de beste variant te tonen.
8. 08Rapporteer steekproefgrootte, onzekerheid, nettoresultaat en maximale terugval. Een hoog trefpercentage bewijst op zichzelf geen voordeel.
9. 09Controleer stabiliteit over perioden en omstandigheden. Verklaar negatieve resultaten en mogelijke faalsituaties.
10. 10Bewaar dataverwijzingen, code, configuratie, toevalszaadwaarden en uitvoer. Beoordeel uitspraken en risico’s vóór publicatie.

Onderzoekslogboek

Vraag en beslisregel

 

Data, licentie en periode

 

Training / validatie / eindtoets

 

Referentie en kosten

 

Alle onderzochte varianten

 

Resultaten, onzekerheid en beperkingen

 

Volgend besluit en beoordelaar