백테스트 검증 (성능 평가)

아파트 예측 정확도를 확인하는 방법

예측 모델을 평가할 때는 먼저 “무엇을 예측했는가”와 “실제값을 언제 알 수 있었는가”를 고정해야 합니다. 기준일 이후의 거래나 미래 지표를 기준일 입력에 섞으면 결과가 좋아 보여도 실제 사용 시점의 예측 성능을 설명하지 못합니다.

과거 기준일 재현 백테스트

백테스트는 과거의 특정 기준일로 돌아가 그 시점에 알 수 있었던 데이터와 모델 경로를 사용해 미래를 예측하고, 예측 대상 기간이 지난 뒤 실제로 신고된 실거래와 비교하는 방식입니다. 아파트 인사이트에서는 장기 균형 보정까지 포함한 현재 운영 모델의 예측 경로를 재현할 수 있도록 설계합니다.

이때 실거래 앵커는 예측 기준일 이후의 정보를 미리 사용하지 않아야 하며, 대상 실제값의 신고 성숙도와 거래 유형을 별도로 확인해야 합니다. 분양권 전매 같은 모델 입력 제외 거래와 일반 매매를 섞으면 가격 기준과 실제값의 의미가 달라질 수 있습니다.

표본 외 학습 구간과 표본 외 검증 구간의 의미

정확도 보고서는 학습 구간만으로 판단하지 않습니다. 모델 성능을 읽을 때는 다음 세 범위를 함께 비교해야 과적합과 셀별 회귀를 확인할 수 있습니다.

중요한 용어 구분: 현재 상수를 전 기간에 적용한 학습·검증 구간은 활성 모델 시계열 분할이며, 모델과 계수를 과거 시점에 미리 고정해 평가하는 엄격한 시점 분리 방식과는 차이가 있습니다. 아파트 인사이트는 이러한 평가 방식의 조건과 한계를 투명하게 공개합니다.

또한 학습 풀에서 제외한 고정 단지의 전향 검증은 5단계 검증 구간과 다른 지표입니다. 두 결과를 하나의 “최고 정확도”로 합치지 않고 각각의 표본과 목적을 구분합니다.

주간 대표 검증과 충격 테스트

전체 표본의 평균 지표만으로는 특정 단지나 특정 시기에 발생하는 회귀를 숨길 수 있습니다. 그래서 주간 무작위 일반 단지 검증에서는 고정된 공식 코호트와 학습 풀에서 제외한 일반 단지를 분리하고, 기준일 시점에 맞춰 거래 정보를 준비한 뒤 전향 예측을 재생합니다.

모델 변경과 모델 보정에서는 안정기·전환기·폭등기·폭등 지속기·하락 충격기를 포함한 기준 시점도 별도로 확인합니다. 특히 폭등과 폭락을 같은 방식으로 잘 설명하는지, 한 셀의 성능이 좋아지는 대신 다른 셀이 무너지지 않는지를 셀 단위로 확인합니다.

기술 백서에서 현재 모델의 검증 표와 세부 설계를 확인하세요.

수치를 해석할 때의 주의점

• 평균절대백분율오차(MAPE), 결정계수(R²), 편향(Bias)은 표본 구성과 예측 기간, 티어·구간 셀에 따라 달라지므로 표본 수와 분할을 함께 기록해야 합니다.
• 표본 외 검증 구간이라는 표현만 보고 엄격한 시점 분리 표본 외 검증으로 해석하지 않습니다. 활성 모델 시계열 분할인지 고정 모델 묶음 기반인지 확인합니다.
• 예측의 중앙 경로와 중앙 80% MC 범위는 예측값 오차와 구간 포함률이라는 서로 다른 질문에 답합니다.
• 신축의 거래 부족 시 초기 보정이나 재건축 뉴스 프리미엄 같은 운영 환경 전용 보정을 모델 보정·코호트·백테스트 입력과 섞어 성능을 비교하지 않습니다.
• 어떠한 검증도 미래 가격이나 투자 수익을 보장하지 않으며, 실제 거래 판단에는 별도의 재무·법률·현장 검토가 필요합니다.

미래가격 예측 결과 읽는 방법 보기

자주 묻는 질문