🛵꾸준한 꿈틀꿈틀

혹시 Zero Copy에 대해서 아시나요? 저도 데이터 엔지니어링을 공부하면서 처음 알게되었고 꽤 흥미로운 메커니즘이었습니다 ㅎㅎ그리고 최근에 kotlin을 활용해서 파일 서빙을 다루는 작업을 진행했던 경험이 있는데, 당시 파일 전송 속도가 꽤 중요한 요소였고 자연스럽게 Zero Copy가 떠올랐습니다.kotlin을 사용하다보니 JVM이라는 도구에서 오는 특성 등도 고민하게 되고 꽤 의미있는 경험이었는데요.그래서 오늘은 Zero Copy에 대해서 간단하게 소개하고 kotlin S3 upload에서 Zero Copy가 가능한지? 등을 공유해보겠습니다 :)먼저, 코드레벨에서 파일 전송 등 local storage(e.g. disk)에서 파일을 읽어서 외부로 보내는 로직을 구성했다면 어떤 과정을 거치게 될까..

이 글은 최근에 있었던 서버 OOMKilled 장애 과정을 기록 및 공유하며 회고하는 글입니다.또한 이 글은 인프라 레벨(cpu, memory)에서의 장애 감지 및 대응 프로세스에 관한 내용을 기록하기 때문에 NPE(Null Point Exception) 같은 코드 레벨에서의 명확하고 단순한 문제는 크게 다루지 않습니다. 여러분들은 서버의 메모리가 부족해 OOMKilled 장애 발생 시 어떻게 대응하시나요?저는 보통 다음과 같은 프로세스로 대응합니다.1. 장애 감지2. 예상되는 원인 범위를 합리적으로 찾고 가설을 세운다. (가설 수립)3. 가설을 검증하기 위해 APM, log 등 단서들을 찾고 가설을 확인하고 원인 범위를 좁혀간다. (가설 검증 및 route finding)4. 위 과정을 반복하여 원인을..