1. 넓은 범위는 설명력을 흐릴 수 있다
하한과 상한이 너무 넓으면 실제 시가가 그 안에 들어와도 무엇이 맞았는지 판단하기 어렵다. 그런 회고는 모델의 방향성보다 안전한 표현만 남기기 쉽다.
범위는 보조 정보로 유용하지만, 회고의 첫 질문은 언제나 실제 결과가 중심값에서 얼마나 멀어졌는가여야 한다.
실제로 백테스트를 볼 때 많은 사람이 가장 먼저 “범위 안에 들어왔는지”를 찾는다. 그 질문 자체가 틀린 것은 아니지만, 그 결과만으로는 다음 종목에 어떤 교정을 해야 하는지 거의 남지 않는다. 범위를 넓게 잡아두면 적중처럼 보이는 사례는 늘어난다. 문제는 그렇게 늘어난 적중이 모델의 설명력을 높인 것이 아니라, 단지 판정 기준을 느슨하게 만든 것일 수 있다는 점이다.
예를 들어 중심값과 실제 시가의 거리가 꽤 컸는데도 넓은 상단과 하단 덕분에 “맞았다”고 말해버리면, 그 순간부터 모델이 어느 쪽으로 빗나갔는지 읽을 기회가 사라진다. 나는 이 지점이 가장 아깝다고 본다. 회고는 숫자를 미화하는 보고서가 아니라, 다음 해석의 기준을 조금씩 교정하는 기록이어야 하기 때문이다.
2. 중심값은 오차의 방향을 남긴다
실제 값이 중심값보다 크게 높았는지, 혹은 크게 낮았는지를 보면 당시 모델이 수요를 과소평가했는지 과대평가했는지 읽을 수 있다. 이 차이는 다음 종목 해석에서 바로 도움이 된다.
단순 적중률보다 중요한 것은 같은 실수가 반복되는 패턴을 찾는 일이다. 중심값 기준 회고는 그 패턴을 더 빨리 드러낸다.
백테스트를 읽는 실전 감각은 결국 오차의 방향을 기억하는 데서 생긴다. 어떤 종목에서 실제 시가가 중심값보다 크게 위로 튀었다면, 그 시기에는 수요 강도나 시장 심리를 보수적으로 잡았을 가능성이 있다. 반대로 아래로 많이 내려갔다면 유통 부담이나 기대 과열을 덜 반영했을 가능성이 크다. 이 방향 감각이 있어야 다음 종목을 볼 때 “이번에도 비슷한 실수가 반복될 수 있나”를 떠올릴 수 있다.
범위만 보면 이런 감각이 잘 남지 않는다. 중심값을 먼저 보면 적중 여부보다도 왜 위로 빗나갔는지, 왜 아래로 밀렸는지를 다시 적게 된다. 그 메모가 쌓이면 단순히 몇 퍼센트를 맞혔는지보다 훨씬 유용한 자료가 된다. 결국 회고의 가치는 숫자 자랑이 아니라, 다음 판단에서 같은 과신을 줄이는 데 있다.
- 중심값 위로 크게 벗어나면 수요 과소평가 가능성을 점검한다.
- 중심값 아래로 크게 벗어나면 유통 부담이나 시장 심리 반전 신호를 다시 본다.
- 오차 방향이 반복된다면 모델보다 해석 습관 쪽 문제인지도 같이 점검한다.
3. 회고는 맞힌 사례보다 빗나간 사례에서 배운다
백테스트 페이지는 적중 자랑을 위한 공간이 아니라 모델 한계를 공개하는 기록이어야 한다. 그래서 빗나간 사례를 숨기지 않고 이유를 붙여 두는 편이 다음 판단에 더 유용하다.
결국 중요한 것은 적중 숫자 자체보다, 그 숫자가 어떤 조건에서 무너졌는지를 설명할 수 있는가다.
나는 백테스트를 볼 때 맞힌 사례보다 빗나간 사례를 더 오래 본다. 맞힌 사례는 그 순간 기분은 좋지만, 다음 종목을 볼 때 그대로 복제되지 않는 경우가 많다. 반대로 크게 빗나간 사례는 이유를 끝까지 따라가게 만든다. 당시 공모가가 어떤 위치였는지, 수요예측과 확약은 어땠는지, 시장 분위기는 어땠는지 다시 훑다 보면 “내가 어느 숫자를 너무 쉽게 믿었는지”가 생각보다 선명하게 드러난다.
그래서 회고 문장을 쓸 때도 일부러 완곡하게 적지 않으려 한다. 실제 시가가 중심값보다 높았는지 낮았는지, 그 차이를 어떤 신호와 연결해 해석했는지 남겨야 다음에 다시 꺼내 읽을 가치가 생긴다. 결국 백테스트는 성적표가 아니라 교정 기록이다. 중심값을 먼저 보는 습관도 그 교정을 가능하게 만드는 아주 작은 출발점이라고 생각한다.