
판정 원장(
validation_verdicts)을 2026-09-09 에 집계한 그림입니다. 판정칸 267개(국내주식 231·크립토 36) 가운데 통제 최소선을 넘은 게 39칸, 다중비교 보정을 두 계수기 모두 통과한 게 5칸, 거래비용을 빼고도 양수인 게 0칸입니다.
<aside> 🧪
개인 연구 저장소입니다. 졸업작품과 코드 뿌리는 같지만 2026-09-08 에 저장소를 갈랐습니다. 2026-09-11 부터 공개 화면은 졸업작품 저장소에서 나갑니다.
졸업작품 제출 범위는 jihun-moon/chrono-capstone 쪽입니다. 두 저장소 모두 비공개라 요청하시면 공유합니다.
</aside>
"이 매매 신호가 진짜인가"를 가리는 장치를 만듭니다.
그 장치로 졸업작품 때 팀이 만든 신호와 제가 따로 만든 규칙을 떨어뜨리는 게 작업의 대부분입니다.
백테스트는 한 번 돌리면 숫자가 나오고, 그 숫자는 거의 항상 좋게 나옵니다.
규칙을 먼저 문서로 고정해 두고, 그 다음에 측정합니다.
순서를 바꾸면 결과를 보고 기준을 맞추게 됩니다.
| 장치 | 뭐를 막는가 |
|---|---|
| 겹침 블록 묶기 | 거래끼리 독립이 아닙니다. 그냥 세면 표본 수가 부풀려집니다 |
| 클러스터 표준오차 | 같은 시각에 여러 종목이 같이 죽습니다. 오차가 과소평가됩니다 |
| 라벨 셔플 밴드 | 신호가 아니라 장세를 본 건 아닌지 |
| Benjamini-Hochberg 보정 | 수십 종을 동시에 검정하면 우연히 통과하는 게 생깁니다 |
| walk-forward | 학습 구간과 검증 구간 사이 미래 정보 누수 |
| 계수기 2종 병기 | 계수기를 바꾸면 부호가 바뀌는 경우가 있습니다. 갈리면 승격하지 않습니다 |
| 비용 반영 후 재측정 | 수수료와 슬리피지를 빼면 부호가 바뀌는 게 있습니다 |
판정칸 267개 중 통제 최소선을 넘은 게 39칸이었습니다.
다중비교 보정을 두 계수기 모두 통과한 5칸은 전부 국내주식 칸이었고, 비용을 빼면 코스피보다 유의하게 나빴습니다.
왕복비용 0.43%p 를 다시 더해도 다섯 칸 모두 음수입니다. 위 그림이 그 원장입니다.
헤드라인을 배포하지도 않는 종목으로 재고 있었습니다. 슬리피지는 종목마다 10배 넘게
벌어지는데 고정값 하나로 쓰고 있었고, 종목별로 다시 넣으니 양수가 음수로 뒤집혔습니다.
헤드라인 숫자는 두 번 내렸습니다. 같은 규칙을 격자 위상만 바꿔 다시 재니 처음 값의