함께 놀자! Linux와 Python

Multitail과 lnav로 ZeroAOS를 모니터링

0 81

1.
이번 주 내내 통합시험을 진행중입니다. DMA용 매매시스템과 증권사 트레이더용 매매시스템은 다른 수준의 시험을 요구합니다. 위험관리가 충실하지 못한 매매시스템은 회사를 파산으로 이끕니다. 대표적인 경우가 한맥투자증권입니다. 알고리즘기반의 자동매매시스템이 일반적이지 않은 환경 혹은 부정적인 시각이 많은 조건에서 무엇을 가이드라인으로 할지 중요합니다. ZeroAOS를 설계할 때부터 심혈을 기울인 부분이 Pre-Trade Risk Control입니다. FIA나 FINRA 혹은 해외 거래소가 내놓은 자료를 기준으로 요건을 정리했습니다. 국내도 비슷한 가이드라인이 있습니다. 한국거래소 시장감시위원회가 발간한 주문사고 예방을 위한 “알고리즘거래 위험관리 가이드라인” 입니다. 이외에 금융투자회사의 금융사고 방지를 위한 모범규준중 자기매매시스템과 관련한 규준이 있습니다.

통합시험을 하면서 고민을 한 부분중 하나가 시스템 모니터링환경입니다. 시험용으로 사용하는 모니터가 작은 모니터 두개라 더욱더 효율적인 환경을 만들고 싶었습니다. 특히 로그(LOG)와 관련한 도구를 찾았습니다. 일반적으로 리눅스계열의 서버에 터미널접속을 할 경우 Putty를 많이 사용합니다. 저도 Putty를 사용해서 로그온을 한 후 grep, tail 등의 명령어를 이용하여 메시지를 필터링하는 방식을 사용했습니다. 간단한 시험을 불편하지 않았지만 여러 파일이나 데이타 혹은 프로세스를 확인하려고 할 때 창을 관리하기도 불편하고 보기도 힘들었습니다.

고민을 하다가 생각한 것이 Multitail과 Lnav입니다. 먼저 Multitail입니다. 개발자의 설명입니다. Multiple + Tail이라고 생각하면 거의 비슷합니다.

MultiTail lets you view one or multiple files like the original tail program. The difference is that it creates multiple windows on your console (with ncurses). It can also monitor wildcards: if another file matching the wildcard has a more recent modification date, it will automatically switch to that file. That way you can, for example, monitor a complete directory of files. Merging of 2 or even more logfiles is possible. It can also use colors while displaying the logfiles (through regular expressions), for faster recognition of what is important and what not. It can also filter lines (again with regular expressions).

MultiTail – Monitor Multiple Files Simultaneously in a Single Linux Terminal을 보면 잘 정리해놓았습니다. 저는 -e 혹은 -ev 옵션으로 특정한 값이 들어간 줄 혹은 아닌 줄만 보이는 방식으로 사용했습니다. 주로 ERR로 필터링을 하였습니다.

zeroaos_multitail

2.
또다른 도구는 lnav(The Log File Navigator)입니다. Multitail과 비슷합니다. Lnav는 특정한 파일을 모니터링할 때 필터링을 바꾸거나 좁히면서 원인을 찾을 때 사용했습니다. lnav가 지원하는 명령어(cmd)중 filter-in과 filter-out이 있습니다. 각각 정규식에 따른 줄을 보여주거나 주여주지 않는 기능입니다. 나아가 filter-in -> filter-in -> filter-out식으로 필터링을 이을 수 있습니다. tail을 사용할 때 grep 을 여러번 사용하는 것과 비슷한 개념입니다.

lnav1

여기에 좁은 사무실의 일상에서 소개하였던 Putty Connection Manager까지 동원하여 모니터링을 합니다. 이상을 모아서 만든 모니터링 및 디버깅환경입니다. 좌측은 프로세스와 메모리데이타입니다. watch 명령어를 이용하여 자동으로 변경부분을 볼 수 있도록 했습니다. 우측은 로그 등입니다.

puttycm

물론 ZeroTerminal을 이용한 매매모니터링을 가능합니다만 시스템 등은 터미날이 유용합니다.

About the author / 

smallake

댓글달기

최신 댓글

트윗

  • 매주 본방사수하였던 낭만닥터 김사부. 어떤 칼럼의 한 문장. "진짜 어른이고 선생님이라면 자신의 모든 기술을 전해주고 다음 세대가 홀로 설 수 있도록 도와주어야 한다" 어른은 나이의 많고 적음이 아닙니다.

    2 hours ago
  • 드라마 도깨비 "신은 그저 질문하는 자일뿐. 운명은 내가 던지는 질문이다. 답은 그대들이 찾아라” 비약이지만 선악과를 먹은 아담에게 신은 질문합니다. "네가 어디 있느냐?" https://t.co/Ci0dUxMmdf

    10 days ago
  • 2017년 금융과 관련하여 달라지는 제도중 아주 사적인 관심사만 소개합니다. https://t.co/SXYIEmoz3w https://t.co/0ZGnxKUlfj

    12 days ago
  • 매매체결시스템의 전성시대? 대체거래소가 수면아래로 가라앉으면서 내부주문집행시장이 부상하는 듯 합니다. https://t.co/rUTkUBcOqJ https://t.co/6ADqUI4WTD

    13 days ago
  • "직무정지된 대통령은 헌법이 부여한 국가원수 및 행정부 수반으로서 권한을 행사할 수 없다. 국무회의나 수석비서관 회의를 주재하거나, 정책현장 점검 등 일상적으로 해오던 국정 수행도 못한다" 그런데 기자간담회? https://t.co/GtvSSDolnV

    15 days ago