프론트엔드에서 웹소켓을 쓸 때는 주로 연결 이후의 일을 다룬다. new WebSocket(url)로 연결하고, onmessage로 받은 데이터를 화면에 표시하고, 연결이 끊기면 다시 연결한다. 채팅, 알림, 실시간 시세처럼 서버가 먼저 데이터를 보내 주는 화면도 대개 이렇게 만든다. 그 데이터를 수많은 브라우저에 보내는 서버 안에서는 무슨 일이 일어나는지 들여다볼 기회는 많지 않다.
나는 증권사에서 프론트엔드를 개발하고 있다. 매수 주문과 매도 주문의 가격이 맞아 거래가 성사되면 체결이 생기고, 종목 화면의 가격도 바뀐다. DevTools의 WS 탭에는 체결 프레임이 한 줄씩 쌓인다. 나는 이 프레임을 받아 화면에 표시하는 일을 한다.
그런데 프레임을 보내는 서버에 관한 기본적인 질문에도 답하기 어려웠다. 연결이 1만 개라면 체결 한 건을 보내는 일을 몇 번 반복해야 할까. 클라이언트 일부가 프레임을 읽지 않으면 다른 연결에도 영향이 있을까. 체결을 받아 오는 프로세스가 죽으면 사용자의 연결도 함께 끊길까.
회사 서버를 들여다보고 글로 옮길 수는 없어서, 공개된 자료로 체결 서버가 어떻게 동작할지 생각해 보기로 했다. 표본으로 고른 토스증권 웹 화면은 로그인하지 않아도 종목 페이지에서 체결 프레임을 받는다. 비교적 최근에 만들어졌고 브라우저에서 관찰하기도 쉬웠다.
관찰한 프레임 형식을 따르되, 서버 내부는 널리 알려진 설계를 참고해 Rust로 직접 만들었다. 체결을 웹소켓으로 보내는 서버가 어떤 일을 해야 하는지 알아보려는 실험이다. 이 시리즈의 서버 구조는 모두 직접 정한 것으로, 같은 형식의 프레임을 내보낸다고 해서 토스증권의 실제 구현을 알 수 있는 것은 아니다. 서버와 캡처 도구, 측정 결과는 yceffort/ws-trade-server에 있다.
1편에서는 서버를 다루기 전에 증권 시장의 기본부터 정리한다. 주식을 누구에게, 얼마에, 언제 사는지, 산 뒤에는 어떤 일이 남는지 따라가며 거래소와 증권사, 호가와 체결, 장 시간과 서머타임, 결제와 증거금을 설명한다. 이를 바탕으로 캡처한 프레임의 필드가 어떤 제도와 관련 있는지 살펴본다.
2편에서는 프레임에서 확인할 수 있는 정보를 정리하고, 체결 한 건이 서버에서 브라우저까지 전달되는 과정을 살펴본다. 여기에 등장하는 프로세스와 커널, 소켓 버퍼, epoll, 공유 메모리는 프론트엔드 개발에 익숙한 개념과 비교하고 직접 측정한 값을 곁들여 설명한다.
3편에서는 이 과정을 구현한 서버 코드를 다룬다. 체결을 받는 프로세스와 연결을 받는 프로세스를 나눠 공유 메모리 링 버퍼로 연결한다. 구독 색인과 연결별 큐를 구성하고, 데이터를 읽지 않는 클라이언트를 처리하는 방법도 설명한다.
4편에서는 연결 1만 개를 붙여 지연과 메모리를 측정한다. 연결당 메모리를 138KB에서 13KB로 줄인 과정과 연결 수에 따라 지연이 늘어나는 이유를 살펴본다. 측정 중 서버보다 측정 환경이 먼저 한계에 이른 일도 다룬다.