Feature/#12 모니터링 연동

[seokbeom00]

🌱 관련 이슈

• close ✨ 모니터링 툴 연동 #12

📌 작업 내용 및 특이사항

• dev 서버의 상태 및 로깅 추적을 위한 모니터링 툴들을 연동했습니다.

메트릭 수집

• 서버의 메트릭 데이터를 수집하기 위해서 다음과 같은 구조를 채택했습니다.

참고: https://woo-chang.tistory.com/78

• 스프링의 actuator를 이용하여 메트릭 데이터를 받아올 수 있는 엔드포인트를 열어준 뒤, 프로메테우스가 해당 엔드포인트를 통해 메트릭 데이터들을 수집하고, 그라파나가 해당 정보를 바탕으로 UI로 뿌려주는 방식입니다.

• 현재 배포 서버는 우분투 환경의 도커 컨테이너 형태로 배포되어 있기 때문에, (도커 컴포즈 활용 중) 프로메테우스와 그라파나도 동일하게 도커 컴포즈로 컨테이너화 해서 사용하는 방식을 채택했습니다.

• 결과적으로 모니터링 대상이 되는 서버와 모니터링 관련 이미지가 각각 컨테이너 상태로, 같은 내부 네트워크를 공유하도록 했습니다.

• 현재는 요청 수와 서버가 살아있는지 정도의 메트릭 정보만을 UI에 표시해두었습니다.

로그 수집

• 로그 수집을 위해서 로키와 프롬테일을 사용했습니다.

• 프롬테일이 대상이 되는 서버에서 로그를 수집하고, 로키가 저장 및 검색을 수행한다고 생각하시면 됩니다.

• 로키는 기존 elasticsearch 보다 저장 비용이 낮습니다. 메트릭 기반 프로메테우스와 유사한 아키텍처를 가지고 있습니다.

• JSON을 직접 인덱싱하는 방식이 아닌 label을 기반으로 로그를 인덱싱하기 떄문에 label링을 로그에 해주어야 합니다.

• 현재는 status 필드를 기준으로, 500번대 로그만 수집하고 있는 상태입니다.

📚 기타

• 필요한 메트릭 정보나, 로그 정보는 그라파나를 통해 추가하면 될 것 같습니다.
• 추가적으로 로키가 로그 정보를 저장할 수 있는 loki-data라는 폴더를 서버에 생성해둔 상태입니다.
• 추후 CD 로직에 포함시켜도 좋을 것 같습니다.