이상값을 지울지 남길지 결정하는 자료

구분: Citadel EQR 공식 기술·업무 인터뷰
발표일: 2026년 8월 4일
채용공고 아님 — 실제 EQR quantitative-development project 설명

확인 가능한 사실

Citadel EQR의 Rishi가 수행한 프로젝트는 여러 research dataset에서 이상치를 자동으로 찾아 단순 flag가 아니라 해당 값을 버릴지, down-weight할지, 아니면 실제 signal로 유지할지를 결정할 수 있게 하는 framework를 만드는 것이었다. Citadel 공식 자료

Citadel이 강조하는 핵심 질문은 매우 좋다.

“unusual data point가 오류인가, 아니면 중요한 정보인가?”

단순 statistical distance로는 이를 결정하기 어렵기 때문에, researcher들이 그 데이터를 실제로 어떻게 쓰는지와 downstream effect를 함께 고려한다.

확인 가능한 사실 — 첫 anomaly model은 부족했다

초기 모델은 이상치 후보를 잘 flag했지만, “통계적으로 멀다”는 것만으로 실제 값을 제거해야 하는지는 판단하지 못했다. 연구자들이 surrounding information과 business context를 추가해주면서 framework를 수정했고, 최종적으로 user feedback을 받아 반복적으로 모델을 개선하는 product-loop 구조로 발전시켰다.

즉:

Model → anomaly flag

가 아니라:

Anomaly Detection → contextual classification → keep / down-weight / exclude → researcher feedback → model refinement

이다.

Citadel 전체 research 방식과 연결

Citadel EQR Head of Research Nick Butler도 EQR를:

Data → Predictions → Trades

pipeline으로 설명하고, 연구자가 alpha research뿐 아니라 market impact, portfolio construction, optimization, execution까지 전체 process에 관여한다고 밝힌다. prototype은 simulation에서 검증하고, market feedback을 받아 반복 개선한다. Citadel EQR research workflow

공개자료 기반 추론

이 자료에서 흥미로운 점은 데이터 품질관리가 ETL팀의 housekeeping 업무가 아니라 alpha research의 일부라는 것이다.

금융 데이터의 이상치는:

vendor 오류
stale price
timestamp 문제

일 수도 있지만,

실제로는:

flash liquidity shock
forced liquidation
information event

같은 가장 좋은 signal일 수도 있다.

따라서 자동:

3σ → drop

규칙은 quant data에서 매우 위험하다.

한국 채권시장 복제 아이디어

Bond Data Anomaly Engine을 만들 수 있다.

예:

국고10년 가격이 peer curve 대비 8σ 이탈했다.

시스템이 바로 삭제하는 대신:

Type A — Data error

stale
duplicated
timestamp mismatch

Type B — Market microstructure

thin-book execution
block trade
temporary impact

Type C — Real information

policy event
foreign flow shock
issuer news

로 분류한다.

그리고:

drop down-weight keep create_event_feature

중 action을 결정한다.

특히 C 타입 anomaly를 신규 feature로 승격시키는 과정이 중요하다.

복제 가치: ★★★★★