TRIBEAI / 버전 2026-11-02
지표 검증 체크리스트
지표를 신중하게 검증하기 위한 체크리스트와 실험 기록입니다. 무료 HTML을 저장하거나 인쇄할 수 있습니다.
- ☐ 결과를 보기 전에 질문, 합격 기준과 중단 규칙을 작성하세요.
- ☐ 데이터 출처, 라이선스, 버전, 시각, 시간대와 조정을 기록하세요. 대상 선정에는 당시 이용 가능했던 정보만 사용하세요.
- ☐ 데이터를 시간순으로 나누세요. 특성, 척도와 임계값은 훈련 데이터만으로 조정하세요.
- ☐ 최종 테스트는 남겨 두세요. 과거 데이터만 사용하는 순차 검증을 실시하고 예측 기간의 중복과 의존성을 기록하세요.
- ☐ 같은 날짜, 목표와 비용 가정에서 단순한 기준 방법과 비교하세요.
- ☐ 수수료, 스프레드, 슬리피지와 체결 제약을 포함하세요. 스톱 가격의 체결은 보장되지 않습니다.
- ☐ 시도한 모든 모델, 시장, 임계값과 기간을 기록하세요. 최상의 설정만 보고하지 말고 다중 검정을 고려하세요.
- ☐ 표본 수, 불확실성, 비용 차감 결과와 최대 낙폭을 보고하세요. 높은 적중률만으로 우위를 입증할 수 없습니다.
- ☐ 다양한 기간과 조건에서 안정성을 확인하세요. 부정적 결과와 방법이 실패할 수 있는 상황을 설명하세요.
- ☐ 데이터 참조, 코드, 설정, 난수 시드와 출력을 보관하세요. 게시 전에 주장과 위험을 검토하세요.
실험 기록
- 질문과 판단 기준
- 데이터, 라이선스와 기간
- 훈련 / 검증 / 최종 테스트
- 기준 방법과 비용
- 시도한 모든 설정
- 결과, 불확실성과 한계
- 다음 결정과 검토자