한울이

1. 문제상황상용환경에서 aws xray 비용이 많이 나오는 이슈가 발생2. 환경ECSAWS Distro for Opentelemetry Collector3. 현재 상황 및 해결X-Ray remote sampling 을 사용하면서 비율을 설정해서 사용 중새로운 api 들이 추가 될 때 마다 비율을 생각해서 추가 해줬어야 함ex) 계속 polling 하는 api 는 비율을 어떻게 해야할지..?sampling 비율을 낮게 하면 원하는 trace 를 못 보는 경우도 생김높게 하면 비용이 문제가 됨팀에서 분산 추적을 사용하는 목적은 error 가 났을 때 확인 하기 위한 용도opentelemetry processor 중 tail sampling processor 를 사용하여 error 인 경우만 샘플링하여 처리..

1. 문제상황상용환경에 트래픽이 몰리면서 rds 인스턴스의 cpu 사용량이 99% 를 사용하는 이슈가 발생rds 의 부하가 걸리면서 연관 서비스들에서 connection timeout 이 발생  2. 환경Spring boot 3.2AWS aurora mysql (multi az)ECS3. 해결 과정대기 인스턴스 (리더 인스턴스) 먼저 scale upfailover 를 통한 라이터 인스턴스와 리더 인스턴스 교체3-1. 해결 과정 중 이슈연관된 서비스가 클러스터 엔드포인트를 바라보고 있는 상황에서 failover 를 통해 인스턴스가 교체되었는데 인식을 못함mysql jdbc driver 에서 제대로 지원을 안해서 발생한다고함 -> aws-mysql-jdbc 사용해야 한다고 함 (https://github..