함께 놀자! Linux와 Python

Multitail과 lnav로 ZeroAOS를 모니터링

0 155

1.
이번 주 내내 통합시험을 진행중입니다. DMA용 매매시스템과 증권사 트레이더용 매매시스템은 다른 수준의 시험을 요구합니다. 위험관리가 충실하지 못한 매매시스템은 회사를 파산으로 이끕니다. 대표적인 경우가 한맥투자증권입니다. 알고리즘기반의 자동매매시스템이 일반적이지 않은 환경 혹은 부정적인 시각이 많은 조건에서 무엇을 가이드라인으로 할지 중요합니다. ZeroAOS를 설계할 때부터 심혈을 기울인 부분이 Pre-Trade Risk Control입니다. FIA나 FINRA 혹은 해외 거래소가 내놓은 자료를 기준으로 요건을 정리했습니다. 국내도 비슷한 가이드라인이 있습니다. 한국거래소 시장감시위원회가 발간한 주문사고 예방을 위한 “알고리즘거래 위험관리 가이드라인” 입니다. 이외에 금융투자회사의 금융사고 방지를 위한 모범규준중 자기매매시스템과 관련한 규준이 있습니다.

통합시험을 하면서 고민을 한 부분중 하나가 시스템 모니터링환경입니다. 시험용으로 사용하는 모니터가 작은 모니터 두개라 더욱더 효율적인 환경을 만들고 싶었습니다. 특히 로그(LOG)와 관련한 도구를 찾았습니다. 일반적으로 리눅스계열의 서버에 터미널접속을 할 경우 Putty를 많이 사용합니다. 저도 Putty를 사용해서 로그온을 한 후 grep, tail 등의 명령어를 이용하여 메시지를 필터링하는 방식을 사용했습니다. 간단한 시험을 불편하지 않았지만 여러 파일이나 데이타 혹은 프로세스를 확인하려고 할 때 창을 관리하기도 불편하고 보기도 힘들었습니다.

고민을 하다가 생각한 것이 Multitail과 Lnav입니다. 먼저 Multitail입니다. 개발자의 설명입니다. Multiple + Tail이라고 생각하면 거의 비슷합니다.

MultiTail lets you view one or multiple files like the original tail program. The difference is that it creates multiple windows on your console (with ncurses). It can also monitor wildcards: if another file matching the wildcard has a more recent modification date, it will automatically switch to that file. That way you can, for example, monitor a complete directory of files. Merging of 2 or even more logfiles is possible. It can also use colors while displaying the logfiles (through regular expressions), for faster recognition of what is important and what not. It can also filter lines (again with regular expressions).

MultiTail – Monitor Multiple Files Simultaneously in a Single Linux Terminal을 보면 잘 정리해놓았습니다. 저는 -e 혹은 -ev 옵션으로 특정한 값이 들어간 줄 혹은 아닌 줄만 보이는 방식으로 사용했습니다. 주로 ERR로 필터링을 하였습니다.

zeroaos_multitail

2.
또다른 도구는 lnav(The Log File Navigator)입니다. Multitail과 비슷합니다. Lnav는 특정한 파일을 모니터링할 때 필터링을 바꾸거나 좁히면서 원인을 찾을 때 사용했습니다. lnav가 지원하는 명령어(cmd)중 filter-in과 filter-out이 있습니다. 각각 정규식에 따른 줄을 보여주거나 주여주지 않는 기능입니다. 나아가 filter-in -> filter-in -> filter-out식으로 필터링을 이을 수 있습니다. tail을 사용할 때 grep 을 여러번 사용하는 것과 비슷한 개념입니다.

lnav1

여기에 좁은 사무실의 일상에서 소개하였던 Putty Connection Manager까지 동원하여 모니터링을 합니다. 이상을 모아서 만든 모니터링 및 디버깅환경입니다. 좌측은 프로세스와 메모리데이타입니다. watch 명령어를 이용하여 자동으로 변경부분을 볼 수 있도록 했습니다. 우측은 로그 등입니다.

puttycm

물론 ZeroTerminal을 이용한 매매모니터링을 가능합니다만 시스템 등은 터미날이 유용합니다.

About the author / 

smallake

댓글달기

트윗

  • SW산업협회가 핀테크전문가 성장 로드맵을 만들었다고 합니다. 틀을 정해놓은 전문가가 성공적인 핀테크비지니스를 만드는 것은 아닙니다.국가직무능력표준과 핀테크 https://t.co/aBrp5bJXns https://t.co/dBz8uE6Vbp

    17 hours ago
  • 세상이 바뀌어 철학이 있을 자리에 데이타분석과 수학이 자리잡은 듯. 퀀트도 대중화하고 프로와 아마추의 경계가 없어집니다. 미국 캘리포니아 대학 Saari교수의 무료 온라인 강의 Math of Finance. https://t.co/9xfbvQwtb7

    19 hours ago
  • 영화 예고편에 나온 '특별시민' 대사 "진실하게 소통하세요. 소통 안 되면 고통이 옵니다" 이미 고통을 받고 계신 분이 계시지만 후보로 나온 분들 진실로 유권자와 소통하시고 당선 후에도 경청하시길 바랍니다.

    yesterday
  • 회고록에 나온 ‘남북한과 관련한 쪽지’를 공개한 송민순. 외교관에게 최고의 덕목이 무엇일까요? 개인의 영달만을 좇는 고위직 외교관들 때문에 나라가 불행해집니다. https://t.co/MWNDua7lz1

    3 days ago
  • Bayesian Machine Learning 더하기 Limit Order Book 더하기 Big Data Analytics를 비즈니스모델로 하는 회사가 있네요. 최근에 본 핀테크 비즈니스모델중 가장 마음에 듭니다.

    4 days ago
트레이딩컨설팅그룹이음 서비스

ZeroAOS, 매매API
ZeroFIX/OMS
국내외매매플랫폼
Jira, SPA, Node.js
매매서버 및 튜닝

자세한 정보는 아래를 선택하세요
    바   로   가   기