시장조성자는 spread를 얻는 호가와 체결 뒤 남는 inventory를 동시에 관리한다. 이 논문은 Polymarket의 실제 417개 시장에서 주문장 메시지를 재구성해 JaxMARL-HFT 환경을 만들고, book·최근 order flow를 보는 정책을 학습했다. 이어 한 에이전트는 호가를, 다른 에이전트는 재고를 맡는 desk 구조로 책임을 분리했다.
재설계한 단일 에이전트는 기준모형보다 no-trade를 덜 선택하면서 주기적 holdout의 손실을 -46.1에서 -9.6 tick으로 줄였다. 다중에이전트에서는 체결 뒤 mid 이동을 호가자의 보상에 넣은 markout 항이 무책임한 체결과 왼쪽 꼬리를 줄였다. spread capture와 inventory carry를 나누되 desk 전체 손익으로 다시 묶어야 한다는 운영원리를 수치로 보여준다.
하지만 관측·행동·재고제약을 함께 바꿔 어느 요소가 차이를 만들었는지 식별하지 못했다. 모든 구성은 seed 하나로 학습했고, 주기적 holdout 평균 포트폴리오가치는 여전히 음수였다. 한국 채권 적용은 여러 날짜와 최소 스무 개 seed에서 비용차감 손익·no-trade·재고 듀레이션·손실창을 함께 통과시켜야 한다.
SCOPE한 예측시장 계열·짧은 기간·단일 seed의 시뮬레이션이다. 모든 구성의 주기적 holdout 평균가치는 음수여서 양의 기대수익이나 실거래 성과를 입증하지 않는다.
Evidence & verification ↓Sources & evidence
Original passages appear only when checked against the publication. Earlier briefing records are identified separately.
호가와 재고를 나누면 보상도 다시 연결해야 한다3 primary · 0 archived +
연구는 Polymarket의 실제 417개 시장을 재구성해 학습환경을 만들었다.
ORIGINAL PASSAGEon 417 real marketsarXiv 2610.26789v1, Abstract and Section 5.3, 19 October 2026, accessed 2026-10-25재설계 단일 에이전트의 holdout 포트폴리오가치는 에피소드당 -9.6 tick, 기준은 -46.1 tick이었다.
ORIGINAL PASSAGEfinishing at -9.6 ticks per episode against -46.1arXiv 2610.26789v1, Section 6.1 and Table 6, 19 October 2026, accessed 2026-10-25각 구성은 seed 하나만 사용했다.
ORIGINAL PASSAGEOne seed per modelarXiv 2610.26789v1, Figure 5 and Section 6.4, 19 October 2026, accessed 2026-10-25Show the original briefing text
구분: 최신 연구·다중에이전트 강화학습 시장조성
발표일: 2026년 10월 19일
핵심 요약
논문 원문은 Polymarket의 실제 417개 시장에서 주문장 메시지를 재구성하고 JaxMARL-HFT 환경에서 호가 에이전트와 재고관리 에이전트를 학습한다. 재설계한 단일 에이전트는 동일 데이터로 재학습한 기준모형보다 더 자주 호가하면서 보유기간 외 손실을 에피소드당 -46.1 tick에서 -9.6 tick으로 줄였다. 그러나 관측·행동·재고제약을 함께 바꿔 어느 요소의 효과인지 분리하지 못했고, 모든 구성은 seed 하나만 사용했으며 주기적 holdout 평가의 평균 포트폴리오가치는 여전히 음수였다.
실무 시사점
호가와 재고를 분리하면 책임이 명확해지는 대신 각 에이전트가 자기 보상만 최적화하는 credit-assignment 문제가 생긴다. 체결 뒤 mid-price 이동을 호가 에이전트에 부과한 markout 보상이 손실창을 줄였다는 결과는, 채권 market making에서 spread capture와 inventory carry를 별도 원장으로 보되 desk 전체 손익으로 다시 묶어야 함을 보여준다. 양의 실거래 수익이 입증된 결과는 아니다.
한국 시장 복제 아이디어
국채선물 L2와 국고채 전자호가 replay에서 호가·헤지 정책을 분리하고, desk P&L 공유형과 체결 후 1초·10초 markout 부과형을 비교한다. 최소 20개 seed와 날짜 단위 holdout을 사용해 비용차감 P&L, no-trade 비율, inventory DV01, 손실창 비중과 tail loss를 평가한다.