AI 주식 예측·모의투자 실험

주가 예측을 세 단계로 실험했다. AlphaSignal 은 규칙 + LightGBM + 로컬 LLM 으로 다음 거래일 상승 가능성이 높은 15종목을 고르는 예측·백테스트 시스템, AlphaTrader 는 그 예측을 증권사 모의투자 계좌로 자동 체결해 예측과 실제 체결의 차이를 잰 실험, RealSignal 은 그 한계를 넘으려는 실시간 판단·모의투자 플랫폼이다. 모든 단계에서 실거래는 없고, 수익을 주장하지 않는다.

각 단계 결과를 보고 다음 단계를 정했다 — RealSignal 은 「AlphaSignal 을 이어 실시간 거래 앱을 만든다」는 첫 지시로 시작했다. RealSignal 에서는 「운영자」로 단계 게이트·일정·AI 사용 한도를 결정하고 결정 요청에 회신했다. 구현은 Claude Code 가, RealSignal 은 여러 AI 에이전트가 나눠 맡았다.

• AlphaSignal(백테스트): 스코어러를 v7 → v12 로 바꾸며 적중률 49.8% → 58.3%(2025년 2월 20거래일, 상위 15종목). 시장이 좋은 날 11일은 평균 74.5%, 나쁜 날 9일은 38.5% 로, 「다음 날 시장 방향을 예측하지 못하는 것이 구조적 한계」라고 결론 냈다.
• AlphaTrader(모의): 2026-04-24 하루 15종목·종목당 1주 모의 체결 비교에서, 매수 합계가 전일 종가 기준 예측 매수 합계보다 0.51% 높았고 이 매수 슬리피지가 예측과 실제 체결 결과 차이의 대부분이었다. 이 결과가 RealSignal 의 실시간 체결 문제의식으로 이어졌다.
• RealSignal(개발·검증): AI 에이전트 전체 코드 리뷰에서 판정 698건(확정 291), 확정 Major 42건 중 21건 수정·21건 보류. 단위 시험 PASS 는 7,236 → 7,331건으로 늘었고 수정 코드로 인한 추가 실패는 없었지만, 기존 FAIL 257·ERROR 154 는 남아 있다(2026-10-27). 모델 연구는 일봉 LightGBM AUC 0.48~0.52 로 「검증된 모델 없음」을 기록했다.

• 수익 모델은 검증되지 않았다. 로드맵은 「실거래에 쓸 수 있는 검증된 모델은 아직 없다」고 적고, 실거래는 게이트를 통과한 모델이 나온 뒤 사람 승인 단계를 거치게 했다.
• 58.3% 는 한 달(20거래일) 백테스트 값이며 실거래 성과가 아니다. 이 사례는 투자 권유가 아니다.

Python(FastAPI·LightGBM·APScheduler·Alembic), Ollama 로컬 LLM(Qwen2.5 32B), Next.js, PostgreSQL·Redis·Grafana, launchd, Kotlin(RealSignal Android 감시 앱).

RealSignal 에서는 계획·검증·작업을 서로 다른 AI 에이전트에 나누는 방식을 실험했고, 마지막에는 Codex 세션이 별도 Claude 세션(관리자 1 + 리뷰어 2)을 띄워 전체 코드 리뷰와 리팩토링을 진행했다.