Amazon EKS 데이터 전송 비용 절감 사례 | 당근 SRE 밋업 3회
당근 밋업 당근 · YouTube
AI 핵심 요약
멀티 AZ Amazon EKS에서 파드 간 크로스존 트래픽이 늘면서 데이터 전송 비용이 커지는 문제를 다뤘다. VPC Flow Logs와 파드 메타데이터를 수집해 S3에 저장하고 Athena로 조인해 트래픽을 분석한 뒤, Istio를 쓰는 서비스에는 로컬리티 로드 밸런싱과 아웃라이어 디텍션을 적용하고 그 외에는 Kubernetes 토폴로지 힌트를 활용했다. 발표자는 두 방안을 적용한 뒤 비용이 다음 날 절반으로 줄었고, 이후 월간 집계에서도 큰 절감 효과를 확인했다고 설명했다. 다만 특정 존에 파드가 몰리면 부하가 편중될 수 있어 균등한 배포가 중요하다는 점도 강조했다.
- VPC Flow Logs와 파드 메타데이터를 S3에 모은 뒤 Athena에서 조인하면 크로스존 트래픽의 발생 지점과 규모를 파악할 수 있다.
- Istio의 로컬리티 로드 밸런싱은 설정만 켜서는 충분하지 않을 수 있으므로, 장애 엔드포인트를 제외하고 다른 존으로 우회할 수 있도록 아웃라이어 디텍션도 구성한다.
- 서비스의 `service.kubernetes.io/topology-mode: Auto` 어노테이션을 활용하면 지원되는 경우 토폴로지 힌트를 적용할 수 있다.
- 로컬리티 라우팅을 적용할 때는 파드가 특정 존에 쏠리지 않도록 배포 균형을 살펴야 한다.
소개
당근마켓 성장과 함께 쌓아온 안정적인 인프라 구축과 운영 노하우를 당근마켓 SRE 팀에서 공유합니다. 이번 SRE 밋업에서는 사내 개발자 플랫폼 개발과 관련된 다양한 세션을 준비했습니다. 🥕발표자료: https://daangn.notion.site/SRE-c62abc2b6f0347a4ace9ee9cdfc49b6b?pvs=4 🥕 당근 SRE에 지원하기: https://about.daangn.com/jobs/ * 1회 밋업 다시보기: https://youtube.com/playlist?list=PLaHcMRg2hoBqWWla-pCBSRqU-jSriiZHj * 2회 밋업 다시보기: https://youtube.com/playlist?list=PLaHcMRg2hoBqJRSlnE7Xw_QpVkf8u6ISH
비슷한 학습 자료
컨퍼런스 당근 밋업
비용이 왜 튀었는지 저도 몰라요 | 2024 당근 테크 밋업
컨퍼런스 당근 밋업
당근마켓 서비스를 모니터링하는 방법 | 당근 SRE 밋업 3회
컨퍼런스 당근 밋업
당근마켓 성장과 함께 쌓아온 안정적인 인프라 구축과 운영 노하우를 당근마켓 SRE 팀에서 공유합니다. 이번 SRE 밋업에서는 사내 개발자 플랫폼 개발과 관련된 다양한 세션을 준비했습니다. 🥕발표자료: https://daangn.notion.site/SRE-c62abc2b6f0347a4ace9ee9cdfc49b6b?pvs=4 🥕 당근 SRE에 지원하기: https://about.daangn.com/jobs/ * 1회 밋업 다시보기: https://youtube.com/playlist?list=PLaHcMRg2hoBqWWla-pCBSRqU-jSriiZHj * 2회 밋업 다시보기: https://youtube.com/playlist?list=PLaHcMRg2hoBqJRSlnE7Xw_QpVkf8u6ISH
데브옵스 · 인프라
컨퍼런스 당근 밋업
당근마켓 성장과 함께 쌓아온 안정적인 인프라 구축과 운영 노하우를 당근마켓 SRE 팀에서 공유합니다. 이번 SRE 밋업에서는 사내 개발자 플랫폼 개발과 관련된 다양한 세션을 준비했습니다. 🥕발표자료: https://daangn.notion.site/SRE-c62abc2b6f0347a4ace9ee9cdfc49b6b?pvs=4 🥕 당근 SRE에 지원하기: https://about.daangn.com/jobs/ * 1회 밋업 다시보기: https://youtube.com/playlist?list=PLaHcMRg2hoBqWWla-pCBSRqU-jSriiZHj * 2회 밋업 다시보기: https://youtube.com/playlist?list=PLaHcMRg2hoBqJRSlnE7Xw_QpVkf8u6ISH
데브옵스 · 인프라
컨퍼런스 당근 밋업
당근 SRE 두 번째 밋업에서는 서비스 배포를 주제로 다양한 세션을 준비했습니다. 🥕 당근마켓 서비스를 cdk8s를 활용해 쿠버네티스에 배포하기 - 김규환 님(당근마켓 SRE 팀 딜리버리 파트) 🥕 발표자료: https://www.notion.so/daangn/SRE-ca64e762e18e492fa449f8e43f0114d5 🥕 당근마켓 SRE팀에 합류하기 : https://team.daangn.com/jobs/4473170003/ 2021년 1월 17일 녹화. https://festa.io/events/1912 * 1회 밋업 다시보기: https://www.youtube.com/playlist?list=PLaHcMRg2hoBqWWla-pCBSRqU-jSriiZHj * 2회 밋업 다시보기: https://www.youtube.com/playlist?list=PLaHcMRg2hoBqJRSlnE7Xw_QpVkf8u6ISH
데브옵스 · 인프라 클라우드
컨퍼런스 당근 밋업
당근 SRE 두 번째 밋업에서는 서비스 배포를 주제로 다양한 세션을 준비했습니다. 🥕 쿠버네티스 멀티 클러스터에서 Addons를 관리하는 방법 - 유정열 님(당근마켓 SRE 팀 클러스터 파트) 🥕 발표자료: https://www.notion.so/daangn/SRE-ca64e762e18e492fa449f8e43f0114d5 🥕 당근마켓 SRE팀에 합류하기 : https://team.daangn.com/jobs/4473170003/ 2021년 1월 17일 녹화. https://festa.io/events/1912 * 1회 밋업 다시보기: https://www.youtube.com/playlist?list=PLaHcMRg2hoBqWWla-pCBSRqU-jSriiZHj * 2회 밋업 다시보기: https://www.youtube.com/playlist?list=PLaHcMRg2hoBqJRSlnE7Xw_QpVkf8u6ISH
데브옵스 · 인프라
컨퍼런스 당근 밋업
아마존 EKS 업그레이드 | 당근마켓 SRE 밋업 1회
컨퍼런스 당근 밋업
당근 SRE 밋업 1회: 당근마켓 성장과 함께 쌓아온 안정적인 인프라 구축과 운영 노하우를 당근마켓/당근페이 SRE 팀에서 공유합니다. 🥕 아마존 EKS 무중단 업그레이드 - 유정렬 님(당근마켓 SRE 팀 클러스터 파트) 🥕 발표자료: https://www.notion.so/daangn/SRE-ca64e762e18e492fa449f8e43f0114d5 🥕 당근마켓 SRE팀에 합류하기 : https://team.daangn.com/jobs/4473170003/ 2021년 8월 26일 녹화. https://festa.io/events/1737/ * 1회 밋업 다시보기: https://www.youtube.com/playlist?list=PLaHcMRg2hoBqWWla-pCBSRqU-jSriiZHj * 2회 밋업 다시보기: https://www.youtube.com/playlist?list=PLaHcMRg2hoBqJRSlnE7Xw_QpVkf8u6ISH
데브옵스 · 인프라 클라우드