Google Cloud Platform에서 시간과 비용과 성능 세 마리 토끼를 잡는 daily batch 구축기 / if(kakaoAI)2024
if kakao · YouTube
소개
Google Cloud Platform에서 다양한 소스에서 매일 ETL하는 파이프라인에는 매일 실행되는 만큼 시간/비용/성능을 모두 고려해야 합니다. AlloyDB로 비싼 인메모리 디비와 근접한 성능 내기, 소스DB에 부하가 거의 없이 매일 ETL 했던 사례, 수천개의 테이블의 ETL을 효율적으로 스케줄링한 경험을 공유합니다. #Data #리소스최적화 카카오헬스케어에서 데이터 플랫폼을 개발하고 있는 Grey입니다. 발표자료 보기 👉 https://speakerdeck.com/kakao/ifkakao24-73 if(kakaoAI)2024에 대한 자세한 정보는 👉 https://if.kakao.com #카카오 #이프카카오 #개발자컨퍼런스 #AI #기술 #개발 #ifkakaoAI2024
유사한 리소스
대용량 데이터베이스 동기화를 위한 최적의 CDC 시스템 구축기 / if(kakaoAI)2024
if kakao · YouTube
카카오 서비스들은 어떻게 CI/CD 를 하는가? / if(kakaoAI)2024
if kakao · YouTube
CodeBuddy 와 함께하는 AI 코드리뷰 / if(kakaoAI)2024
if kakao · YouTube
업무 효율화를 위한 카카오 사내봇 개발기 / if(kakaoAI)2024
if kakao · YouTube
Batch Performance 극한으로 끌어올리기: 1억 건 데이터 처리를 위한 노력 / if(kakao)2022
if kakao · YouTube
Preview data / if(kakao)2022
if kakao · YouTube