HRT의 연구계산은 여러 지역의 CPU·GPU가 거래소의 장기간 자료로 다양한 모델을 학습하고 수많은 거래 시나리오를 모의하는 구조다. 한 학습이 시카고 GPU에서 뉴욕 자료를 가져오다 멈췄지만 표준 전송서비스 로그에는 새 사용자가 보이지 않았다. 계산자원보다 지역 간 데이터 이동이 병목이 된 사건이다.
회사는 Linux 커널의 소켓 함수에 eBPF 훅을 달고 CPU별로 분당 바이트를 집계했다. NFS는 커널 작업자 계정으로 보이는 문제 때문에 저수준 NFS 함수도 별도로 추적했다. 여기에 전송서비스 로그와 스위치의 독립적인 총바이트를 합쳐 사용자·프로그램·워크플로에 귀속했고, 같은 흐름이 여러 계층에 잡힐 때는 한 번만 세었다.
원인은 시카고의 수천 작업이 분산캐시를 거치지 않고 뉴욕의 같은 파일을 반복해 읽은 설정오류였다. HRT는 이 관측자료를 위치변경 판단과 네트워크를 포화시키는 워크플로의 자동 제한에 사용한다. 공개 글은 연구인프라의 진단과 통제 과정은 보여주지만 모델의 라벨·알파·P&L은 공개하지 않는다.
SCOPEHRT가 공개한 글로벌 연구인프라 운영사례다. 도표는 실제 사건을 단순화·과장한 형태이며 모델구조, 시장별 예측목표, 거래지연과 P&L은 공개하지 않았다.
Evidence & verification ↓Sources & evidence
Original passages appear only when checked against the publication. Earlier briefing records are identified separately.
Long on Research, Short on Bandwidth4 primary · 0 archived +
HRT는 장기간 시장자료로 여러 모델을 학습한다.
ORIGINAL PASSAGEtrain a diverse set of models on years of historyHRT, Long on Research, Short on Bandwidth, Intro, 12 October 2026, accessed 2026-10-15커널 집계는 분당 바이트 합계를 사용한다.
ORIGINAL PASSAGEper-minute byte totalsHRT, Long on Research, Short on Bandwidth, Every Byte Counts, 12 October 2026, accessed 2026-10-15집계는 사용자와 워크플로에 트래픽을 귀속한다.
ORIGINAL PASSAGEusers, programs, and workflowsHRT, Long on Research, Short on Bandwidth, Every Byte Counts, 12 October 2026, accessed 2026-10-15HRT는 과도한 워크플로를 자동 제한한다.
ORIGINAL PASSAGEautomated processes to throttle workflowsHRT, Long on Research, Short on Bandwidth, Mostly Accounted For, 12 October 2026, accessed 2026-10-15Show the original briefing text
구분: Hudson River Trading 공식 기술 글·글로벌 연구망 관측성과 자동 제한
발표일: 2026년 10월 12일
핵심 요약
HRT 공식 기술 글은 여러 지역의 CPU·GPU가 장기간 거래자료로 모델을 학습하고 수많은 거래 시나리오를 모의하는 과정에서 WAN 포화가 한 학습을 지연시킨 사례를 설명한다. HRT는 eBPF로 소켓·NFS 트래픽을 추적하고 서비스 로그와 스위치 바이트 카운터를 결합해 사용자·프로그램·워크플로별 전송량을 한 번만 집계했다. 원인은 시카고의 수천 작업이 뉴욕 파일을 캐시 없이 반복해서 읽은 설정오류였고, 현재는 이 텔레메트리로 과도한 워크플로를 자동 제한한다.
실무 시사점
연구 속도를 GPU 사용률만으로 관리하면 데이터가 있는 지역과 계산이 있는 지역 사이의 병목을 놓친다. 모델 실행 ID, 데이터 스냅샷, 서비스 로그, 커널 흐름과 스위치 총량을 하나의 계보로 연결해야 학습지연이 계산·스토리지·네트워크 중 어디서 생겼는지 판별할 수 있다. 이 글은 인프라 운영사례이며 전략별 P&L은 공개하지 않는다.
한국 시장 복제 아이디어
국고채·회사채 시뮬레이션마다 연구자, 작업, 데이터 스냅샷, 리전과 전송 바이트를 기록한다. 서비스 로그 합계와 eBPF 집계, 스위치 총량의 일치율을 관측성 지표로 두고, WAN 포화 시 무제한 실행과 우선순위 제한을 학습완료시간 p95·실패율·재실행비용으로 비교한다.