백테스트 결과를 믿어도 될까? 승률·평균·중앙값 읽는 법
과거 성적표의 숫자가 무엇을 뜻하는지, 그리고 백테스트가 실제보다 좋아 보이게 만드는 함정들을 정리했습니다.
백테스트는 '그때 샀다면'의 계산입니다
백테스트는 어떤 매매 규칙을 과거 데이터에 그대로 적용해서, 그 규칙을 따랐다면 결과가 어땠을지 계산하는 것입니다. 예를 들어 'RSI가 30 아래로 내려간 날 사서 5거래일 뒤 판다'는 규칙을 전 종목의 과거 기록에 모두 적용해 보는 식입니다.
승률보다 평균과 중앙값을 같이 보기
승률은 목표 수익률을 넘은 거래의 비율입니다. 승률이 낮아도 이길 때 크게 이기면 돈을 벌 수 있고, 승률이 높아도 질 때 크게 지면 손해입니다.
평균 수익률은 소수의 대박 거래에 크게 끌려갑니다. 그래서 중앙값(모든 거래를 수익률 순으로 세웠을 때 한가운데 값)을 함께 봐야 합니다. 평균은 +4%인데 중앙값이 −6%라면, 대부분의 거래는 손해를 봤고 몇몇 대박이 평균만 끌어올린 것입니다.
결과를 실제보다 좋아 보이게 만드는 함정
생존 편향: 지금 상장된 종목만으로 계산하면, 중간에 상장폐지된 종목의 큰 손실이 빠져서 결과가 좋아 보입니다.
데이터 왜곡: 액면병합처럼 주가가 조정되지 않은 기록이 있으면 '91원 → 3,460원' 같은 가짜 수익률이 생깁니다. 이 사이트는 하루 가격제한폭(±30%)을 넘는 점프가 낀 거래를 빼서 이런 왜곡을 막습니다.
비용 누락: 실제로는 매매 수수료와 세금, 원하는 가격에 못 사는 차이(슬리피지)가 있습니다. 거래가 잦은 규칙일수록 실제 수익은 백테스트보다 많이 낮습니다.
과최적화: 조건을 이것저것 바꿔 가며 과거에 가장 잘 맞는 조합을 찾으면, 과거에만 맞고 앞으로는 안 맞는 규칙이 되기 쉽습니다.
이렇게 활용하기
백테스트는 '이 신호가 대체로 통하는 편인가'를 가늠하는 용도입니다. 표본(신호 발생 횟수)이 충분히 많은지, 평균과 중앙값이 같은 방향인지, 보유 기간을 바꿔도 결과가 크게 무너지지 않는지 확인하면 믿을 만한 신호를 고르는 데 도움이 됩니다.
백테스트 결과를 옮겨 놓을 때 생각할 것
백테스트 결과가 좋게 나왔다고 해서 같은 성적이 앞으로도 나온다고 말할 수는 없습니다. 과거 자료는 그때의 시장 상황에서만 성립한 결과이기 때문입니다. 금리가 바뀌거나 시장의 분위기가 달라지면 같은 규칙이 전혀 다른 결과를 낼 수 있습니다.
그래서 백테스트는 '이 규칙이 어떤 상황에서 잘 맞고 어떤 상황에서 틀리는지'를 알아보는 도구로 쓰는 편이 낫다고 생각합니다. 성적이 좋은 구간과 나쁜 구간을 나눠서 보시면, 규칙을 언제 쓰고 언제 쉬어야 하는지에 대한 힌트를 얻을 수 있습니다.
검증 결과를 기록해 두는 방법
같은 규칙을 여러 번 바꿔 가며 가장 좋은 결과만 고르면, 그 결과는 이미 과거에 맞춰진 숫자가 됩니다. 이런 경우를 과최적화라고 합니다. 규칙을 바꿀 때마다 무엇을 어떻게 바꿨는지 적어 두고, 바꾸기 전과 후의 결과를 같이 보관하시는 것이 좋습니다.
가능하다면 자료를 둘로 나눠서, 한쪽으로 규칙을 만들고 다른 쪽으로 확인해 보는 방식도 좋습니다. 만든 쪽에서만 좋은 결과가 나오고 확인하는 쪽에서 무너진다면, 그 규칙은 우연에 가까울 가능성이 큽니다.
마지막으로 거래 횟수가 너무 적지 않은지도 확인합니다. 몇 번 거래해 보고 승률이 높다고 말하기는 어렵습니다. 최소한 충분한 횟수의 거래가 있어야 숫자가 의미를 가진다고 생각합니다.
결과를 믿기 전에 확인할 것
백테스트를 할 때 거래 비용과 세금을 빼고 계산했는지도 확인하시는 것이 좋습니다. 비용을 빼지 않은 결과는 실제보다 좋아 보이기 쉽습니다.
실제 매매와 백테스트의 차이
백테스트는 가격을 보고 바로 체결된다고 가정하는 경우가 많습니다. 실제로는 원하는 가격에 체결되지 않거나 일부만 체결될 수 있습니다. 이 차이를 감안해 결과를 조금 보수적으로 읽는 것이 좋다고 생각합니다.
결과를 나눠 보는 방법
백테스트 결과는 한 번에 보기보다 기간을 나눠서 보는 것이 좋습니다. 상승장과 하락장을 나눠 보거나, 연도별로 결과를 비교해 보면 규칙이 특정 시기에만 잘 맞았는지 알 수 있습니다. 한 시기에만 좋은 결과가 나온다면 그 규칙은 일반적인 방법이라고 말하기 어렵습니다.
결과를 나눠 볼 때는 최대 손실 폭도 함께 확인하시기 바랍니다. 평균 수익률이 좋아도 한 번의 손실이 너무 커서 버티기 어렵다면, 실제로 그 규칙을 지키기 힘들 수 있습니다.
결과 숫자를 적어 두는 양식
백테스트 결과는 같은 양식으로 적어 두면 나중에 비교하기 쉽습니다. 기간, 종목 수, 평균 수익률, 최대 손실, 거래 횟수를 한 줄씩 적어 두시기 바랍니다. 규칙을 바꾸면 새 줄을 추가해서 이전 결과와 나란히 두면 어떤 변화가 성과를 바꿨는지 볼 수 있습니다.
숫자로 따라 해 보기
어떤 신호로 100번 매매해서 승률이 55%, 평균 수익률이 +1.2%, 중앙값이 +0.3%였다고 가정해 보겠습니다. 얼핏 좋아 보이지만 수수료와 세금(왕복 0.3% 안팎)을 빼면 중앙값은 0입니다. 즉 대표적인 거래는 본전이고, 일부 큰 수익이 평균을 끌어올린 것입니다. 이런 신호는 몇 번의 큰 수익에 의존하므로 심리적으로 따라가기 어렵습니다.
표본 수도 중요합니다. 신호가 10번만 나온 조건의 승률 70%는 우연일 가능성이 큽니다. 수백 번 이상 나온 신호에서 같은 결과가 나올 때 신뢰도가 올라갑니다. 보유 기간을 5일, 10일, 20일로 바꿔도 비슷한 방향이 나오는지 확인하는 것이 좋습니다.
자주 묻는 질문
Q. 백테스트에서 좋았으니 앞으로도 좋겠죠? A. 과거에 통했다는 것이 미래를 보장하지는 않습니다. 다만 과거에도 안 통했던 신호는 쓸 이유가 약하므로, '걸러 내는 도구'로 쓰는 것이 합리적입니다.
Q. 승률 90%인 신호는 믿어도 됩니까? A. 승률이 비정상적으로 높다면 데이터 왜곡(액면분할 미보정, 표본 부족)이나 목표 수익률이 너무 낮게 설정된 것은 아닌지 먼저 의심하는 것이 좋습니다.
이 글과 함께 써 보기
참고 자료: 한국거래소(KRX) · 금융감독원 전자공시시스템(DART) · 네이버 증권 공개 자료와 제도 설명 · 본문은 운영자가 정리한 교육용 설명입니다
다른 가이드
- 아파트 실거래가 제대로 보는 법: 계약일·신고일·해제·평형
- 아파트 시장 흐름 읽기: 거래량, 3.3㎡당 가격, 거래 급증
- 공모주 청약 기초: 일정, 수요예측, 상장 첫날 가격
- 가이드 전체 보기 →
이 글은 투자 이해를 돕기 위한 일반적인 설명이며, 특정 종목이나 부동산의 매수·매도를 권하는 것이 아닙니다. 투자 판단과 책임은 본인에게 있습니다.