100억 개 파일을 다루는 Data Lake를 위한 여정
if kakao · YouTube
소개
if(kakao)25 100억 개 파일을 효율적으로 관리하기 위해 새롭게 구축된 KHP(Kakao Hadoop Platform) v2의 아키텍처와 함께, Kakao가 데이터 레이크를 구축하면서 겪었던 문제와 해결 방안을 공유합니다. #TECH #Data 빅데이터플랫폼 조직에서 하둡 기반 기술을 담당하고 있는 강민석(rex.tension)입니다. 편리하고 안정적인 대규모 클러스터를 구축하기 위해 항상 고민하고 있습니다. 발표자료 보기 📍https://if.kakao.com/2025/session?sessionId=40 📍if.kakao.com if(kakao)25 홈페이지 : https://if.kakao.com/2025 #카카오 #kakao #이프카카오25
유사한 리소스
데이터는 없지만 LLM은 학습하고 싶어 - Code, Math 데이터 개발기
if kakao · YouTube
대용량 데이터베이스 동기화를 위한 최적의 CDC 시스템 구축기 / if(kakaoAI)2024
if kakao · YouTube
업무 효율화를 위한 카카오 사내봇 개발기 / if(kakaoAI)2024
if kakao · YouTube
Kakao Hadoop Plaform (KHP): 카카오 하둡 플랫폼의 아키텍처와 개발/운영에 대한 이야기 / if(kakao)2022
if kakao · YouTube
Preview data / if(kakao)2022
if kakao · YouTube
생성부터 활용까지, 게임데이터 Flow 따라가기 / if(kakao)2022
if kakao · YouTube