APM Python 에이전트를 개발하면서 자동화된 테스트를 어떻게 구성할지 고민해 본 적 있으신가요? 특히 Auto Instrumentation 기능을 제공하는 에이전트라면 다양한 Python 모듈과 버전 호환성을 테스트하는 것이 매우 중요합니다. 이번 포스팅에서는 Pytest를 활용해 모듈의 버전별, Python 버전별 테스트를 자동화하는 방법을 소개합니다.1. Pytest를 선택한 이유Pytest는 그 강력한 기능과 간편한 사용법 덕분에 Python 개발자들에게 사랑받는 테스트 프레임워크입니다. 다양한 기능 확장, 뛰어난 플러그인 생태계, 직관적인 테스트 케이스 작성 등을 통해 자동화된 테스트 환경을 쉽게 구축할 수 있습니다. 특히 APM 에이전트와 같은 복잡한 프로젝트에서는 다양한 상황을 빠르고 효..

작년 한국에서 열린 PyCon KR 2023에 참여했을 때, “Improving Debuggability of Complex Asyncio Applications” 발표에 참관했었습니다. 이때 python 표준 라이브러리 중 하나인, asyncio를 사용하면서 문제가 발생했을 때, 애플리케이션 내부에서 무슨 일이 일어나는지 들여다보는 것이 어렵고, "코루틴 작업을 디버깅하기 어렵다"는 모니터링 관점에서의 어려움이 있다는 것을 알게되었습니다. 이런 어려움을 해결하기 위해 aiomonitor 이라는 훌륭한 오픈소스를 개발해서 어려움을 겪는 유저들에게 관측 가능성을 제공한다고 이해했습니다. 제가 생각하기에 aiomonitor 에서 다루는 데이터가 분산 추적 기술에서 많이 사용되는 Trace 데이터와 유사하다고..

논문에 필요한 연구를 하는 와중 python pandas dataframe을 사용하는데, 특정 행 이하의 모든 데이터를 제거해야 하는데 pandas를 개발에 많이 사용해보지 않은 탓에 조금 헤멨는데요 .. 저같은 분이 계실까 남겨봅니다. csv 파일을 이용해 거시경제 정보와 주가 정보를 핸들링하는데 아시겠지만 회사의 주가정보 보다 거시경제 정보가 당연히 많기 때문에 회사의 주가 정보 분석을 위한 데이터 포맷을 만들기에는 주가정보의 가장 과거 데이터보다 더 과거의 거시경제 정보는 쓰레기 정보가 됩니다. 주가 정보인 PRICE 보다 더 과거 거시경제 정보는 행을 맞춰서 반듯하게 만들다보니, pandas 특정 행 이하 제거 로직을 찾아보게 되었습니다. 순서는 csv 파일을 pandas로 읽은 후 nan(Not..

안녕하세요 해커의 개발일기 입니다. 오랫만에 글을 쓰게 되었는데요. 요즘은 경제학 공부에 빠져있는 관계로 .. 다른 것들이 아무것도 눈에 들어오지가 않았습니다 ㅜㅜ.. 죄책감에 이번주에는 꼭! 블로그 업데이트를 해야지! 라는 생각으로 TODO List에 적어놨던 주제를 꺼냈습니다. 오늘은 COVID-19 확산 지표와 교통 통계량 데이터를 이용해서 회귀분석을 하는 과정을 가시적으로 보여드리겠습니다. 요즘 핫한 키워드가 무엇이 있는지를 논하게 되면 단연코 데이터 분석 이야기를 안할 수가 없는데요. 데이터 분석을 통해 새로운 비지니스 모델을 찾기도 하고, 새로운 마케팅 방법을 찾기도 하는 등 기업 이익에 상당히 다양하게 일조를 할 수 있는 것이 데이터 분석이 아닌가 싶습니다. 하지만, 아쉽게도 데이터 분석을 ..

anaconda는 정말 꼭써야하는거 같습니다.. 앞으로 주식 자동매매 개발일기를 연재할 계획인데요 .. 꼭필요한 32bit python 쉽게 사용하기 위한 방법입니다. 대부분의 증권사 openapi는 32bit로 제공되고 있기 때문에 이를 사용하기 위해서는 32bit python이 필요합니다. 설치 방법은 간단합니다. $ set CONDA_FORCE_32BIT=1 $ conda create -n youngAndRich_32bit(env 명) python=3.7 anaconda 이렇게 쳐주시면 빠밤 .. 32bit 파이썬을 64bit 환경에서 사용할 수 잇습니다. 정말 파이썬의 인터프리터는 환경의 제약을 쉽게 없앨 수 있는 것 같습니다 .. 요즘 golang에 심취해 있는데 .. 파이썬은 버릴수가 없는 언..

#1 monit 편 이후에 너무 늦어졌네여 ㅜㅜ 요즘 결혼준비와 일 그리고 대학원까지 준비하면서 너무 바쁘다 보니 블로그를 쓸 시간이 너무 부족한 요즘입니다... 자 그럼!! 음성인식 B2C 서버를 구축하기 위해서 백엔드를 구축할 때! 어쩌면 가장 중요할 수도 있는 부분인데요 음성인식은 디코딩 시간이 상당히 길기 때문에 절대적으로 비동기로 진행을 해야 합니다! 동기/비동기란 무엇이냐? 이런 것입니다. 추가적으로 설명을 하자면! 동기는 job이 끝날 때까지 기다리구요! 비동기는 jobs이 끌 날 때까지 기다리지 않습니다! 그러면 여러 리퀘스트를 받게 되면? 동기는 트랜잭션을 하나씩 처리를 하고 하나의 트랜잭션이 끝나지 않으면 다른 요청은 계속~ 기다리고 있겠죠! 시간이 오래 걸리는 트랜잭션을 비동기 처리를..