NoahAI 공개 KPI 읽는 법
2026년 7월
왜 승률 하나로 보면 안 되는가
금융 AI의 공개 KPI는 리더보드가 아니라 운영 검증용 요약입니다. 따라서 승률만 높다고 좋은 시스템이 아니며, 반대로 승률이 낮다고 해서 구조가 나쁘다고 단정할 수도 없습니다.
1. Win Rate는 맥락과 함께 봐야 한다
승률은 얼마나 자주 맞추는지 보여주지만, 그 자체가 시스템 품질의 전부는 아닙니다. NoahAI는 조기청산, HOLD, 리스크 다운시프트를 함께 사용하기 때문에보수적 운영 구조가 승률보다 먼저 작동할 수 있습니다.
2. MDD는 체감 리스크의 핵심이다
최대낙폭(MDD)은 사용자가 실제로 얼마나 흔들릴 수 있는지를 보여주는 지표입니다. NoahAI 공개 KPI에서 MDD를 함께 보는 이유는, 수익보다 먼저리스크 제한과 회복 가능성을 평가하기 위해서입니다.
3. Trading PnL과 Economic PnL은 다르다
최근 공개 KPI에는 Trading PnL과 Economic PnL이 분리되어 표시됩니다.
- Trading PnL: 거래손익 중심의 운영 검증 값
- Economic PnL: 환급, 캐시백, 제휴성 크레딧 등을 더한 참고값
이 분리는 사용자별 프로모션이나 제휴 구조가 코호트 대표 성과를 왜곡하지 않도록 하기 위한 것입니다. 즉 공개 대표값은 거래 구조의 품질을 보고, 경제손익은 보조적으로 읽는 방식이 더 정확합니다.
4. 공개 KPI와 최신 운영 KPI는 다르다
현재 웹사이트의 공개 KPI는 최근 30일 코호트 기준의 정적 공개 스냅샷입니다. 반면 관리자 대시보드는 로그인, 학습 이벤트, 거래 이벤트, 증권/ETF 이벤트를 포함한 익명 운영 KPI를 실시간에 가깝게 누적합니다.
따라서 공개 페이지의 수치가 곧 전체 최신 운영 상태를 모두 대표한다고 읽으면 안 됩니다. 외부 공개용 대표값과 내부 운영용 최신 집계를 구분해서 해석해야 합니다.
5. HOLD 비중과 조기청산도 KPI다
NoahAI는 거래를 많이 하는 시스템이 아니라, 조건이 맞지 않으면 HOLD를 고르고, 잘못된 방향이면 조기청산으로 리스크를 줄이는 시스템입니다. 따라서 비거래와 조기청산도 운영 품질 지표로 봐야 합니다.
6. 왜 어떤 항목은 아직 0인가
평균 보유시간, 거래 응답시간, AI 추론 횟수, AI 응답시간 같은 항목은v3.8.9.28 배포 이후부터 본격 누적되는 운영 KPI입니다.
지금 0으로 보이는 값은 "지원하지 않는다"는 의미가 아니라, 구버전 데이터가 대부분이거나 신규 이벤트가 아직 충분히 쌓이지 않았다는 뜻으로 읽는 것이 맞습니다.
어떻게 읽어야 하나
- 첫째, 코호트 기준 수치인지 단일 사례인지 구분합니다.
- 둘째, 공개 스냅샷 KPI와 최신 운영 KPI를 구분합니다.
- 셋째, 승률보다 MDD와 손익 분포를 함께 봅니다.
- 넷째, Trading PnL과 Economic PnL을 구분합니다.
- 다섯째, HOLD와 조기청산이 많은 이유를 운영 원칙과 함께 읽습니다.