최근 한 개발자가 암호화폐(cryptocurrency) 가격을 예측한 데이터셋 'Sealed Crypto Forecast Dataset'을 허깅페이스(Hugging Face)에 공개했습니다. 이 데이터셋은 예측의 정확도뿐만 아니라 예측의 신뢰도를 나타내는 '보정(calibration)'에 초점을 맞춘 것이 특징입니다. 특히, 50% 예측 구간(interval)이 실제 가격 변동의 84%를 포괄했다고 밝혀, 예측 모델의 신뢰성 검증에 새로운 기준을 제시하고 있습니다.
이 데이터셋은 비트코인(Bitcoin) 등 주요 암호화폐의 미래 가격에 대한 예측치와 함께, 예측이 이루어진 시점(sealed_at), 예측이 해소되는 시점(resolves_at), 실제 결과(outcome) 등의 상세 정보를 포함하고 있습니다. 'median' 값은 예측의 중앙값을, 'core_lo'와 'core_hi'는 50% 예측 구간의 하한과 상한을 나타냅니다. 또한, 'in_core'와 'in_wide' 필드를 통해 실제 결과가 예측 구간 안에 들어왔는지 여부를 기록하여, 예측 모델의 보정 상태를 명확히 확인할 수 있도록 설계되었습니다. 이는 단순히 가격을 맞추는 것을 넘어, 예측이 얼마나 '자신감 있게' 이루어졌는지를 평가하는 데 중요한 지표가 됩니다.
이러한 '보정된(calibrated)' 예측 데이터셋의 공개는 금융 시장, 특히 변동성이 큰 암호화폐 시장에서 예측 모델의 신뢰성을 높이는 데 중요한 의미를 가집니다. 투자자나 트레이더는 단순히 예측치만 보는 것이 아니라, 예측의 불확실성 범위와 해당 범위가 실제 결과를 얼마나 잘 포괄하는지를 함께 고려할 수 있게 됩니다. 이는 예측 모델 개발자들이 더 신뢰할 수 있는 모델을 구축하고, 그 성능을 객관적으로 평가하는 데 필요한 귀중한 자원이 될 것입니다. 장기적으로는 AI 기반 금융 예측 서비스의 투명성과 안정성을 향상시키는 데 기여할 것으로 기대됩니다.