snapshot sync implementation / if(kakao)2022
if kakao 카카오 · YouTube
AI 핵심 요약
클레이튼의 풀 싱크는 모든 트랜잭션을 재실행해야 해 동기화에 시간이 오래 걸렸고, 기존 패스트 싱크 방식도 상태 트라이의 모든 노드를 내려받는 부담이 있었다. 이를 줄이기 위해 이더리움의 스냅 싱크를 클레이튼에 포팅하고, 리프 노드에 빠르게 접근하도록 디스크·메모리 기반 상태 스냅샷 레이어를 도입해 트라이를 로컬에서 재구성했다. 데이터는 해시 공간별로 여러 피어에서 받아 머클 프루프로 검증하며, 동기화 중 새 블록이 생기면 피벗 블록을 갱신하고 힐 스테이지에서 트라이를 보정한다. 전체 동기화는 약 4~5일이 걸렸고 대부분의 시간이 힐 스테이지에 소요돼, 클레이튼의 빠른 블록 생성과 잦은 상태 변경에 맞춘 파라미터 조정이 개선 과제로 남았다.
- 스냅 싱크는 상태 트라이의 모든 노드 대신 리프 노드를 받아 로컬에서 트라이를 재구성한다.
- 리프 노드에 빠르게 접근하려면 기존 LevelDB 순회만으로는 부족하므로 별도의 상태 스냅샷 레이어가 필요하다.
- 해시 공간을 구간으로 나눠 여러 피어에 요청하고, 머클 프루프로 받은 데이터의 정합성을 검증한다.
- 동기화 중 새 블록이 생기면 피벗 블록을 갱신해 다운로드를 이어가며, 이후 힐 스테이지에서 트라이를 보정한다.
- 이더리움의 파라미터를 그대로 적용하기보다 블록 생성 속도와 상태 변경 빈도에 맞춰 조정해야 한다.
소개
현재 클레이튼에서는 전체 싱크(Full Sync)만을 지원합니다. 전체 싱크란 블록 헤더와 트랜잭션을 다른 피어(peer)로부터 받고, 트랜잭션을 재실행하면서 최신 블록까지 동기화하는 기술을 의미합니다. 이더리움에서는 더 빠른 동기화를 위한 기술로 스냅 싱크(Snap Sync)를 구현하였는데요. 스냅 싱크란 전체 싱크와는 다르게 트랜잭션을 재실행하는 대신, 최신 블록의 스냅샷 데이터와 리시트(receipt)를 추가로 가져와서 빠르게 동기화하는 기술을 의미합니다. 이더리움의 스냅 싱크 구조 및 방식과, 클레이튼과의 차이점 그리고 이더리움의 스냅 싱크를 클레이튼으로 옮겨오면서 발생하는 문제점 등을 공유하고자 합니다. #Klaytn 크러스트유니버스의 클레이튼 코어 데브팀 스토리지 파트에서 개발하고 있는 JK입니다. 가까운 미래에는 블록체인이 없는 세상을 상상할수 없다고 굳게 믿고 있습니다. 발표자료 보기 👉https://speakerdeck.com/kakao/ifkakao...
비슷한 학습 자료
컨퍼런스 if kakao
클레이튼과 블록체인 기술 / if(kakao)2022
컨퍼런스 if kakao
‘블록체인’, 그리고 ‘블록체인 기술’은 요즘 주변에서 너무나도 흔히 접할 수 있는 주제인데요, 하지만 그와 동시에 일반인뿐 아니라 개발자에게도 아직은 생경한, 혹은 진입 장벽이 높은 분야로 인식되고 있는 것 같기도 합니다. 이번 발표에서는 그라운드X에서 시작해, 현재 크러스트 유니버스로 이어지고 있는 퍼블릭 블록체인인 클레이튼의 기술 전반에 관해 이야기해 보려고 합니다. 블록체인의 기본적인 개념에서부터, 다른 체인 대비 클레이튼이 가지고 있는 장점, 그리고 클레이튼이 앞으로 해결해 나가고자 하는 문제들까지, 기존의 경험과 노하우를 압축해 이 영상에 담아 보았습니다. #blockchain #layer1 #klaytn 크러스트 유니버스 CKO (Chief Klaytn Officer) 샘입니다. 클레이튼 메인넷 개발과 네트워크 운영을 총괄하고 있습니다. if(kakao)2022에 대한 자세한 정보는 👉 https://if.kakao.com if(kakao)2022에 대한...
블록체인
컨퍼런스 if kakao
StateDB pruning & Migration / if(kakao)2022
컨퍼런스 if kakao
블록체인의 스토리지는 모든 데이터의 정합성 체크를 위해 모든 데이터를 누적해 저장합니다. 지속해서 증가하는 데이터로 인해 로컬 스토리지 데이터는 계속 증가하고, 이에 따라 데이터 액세스 속도는 지속적으로 느려지게 됩니다. 블록체인에서 과거 데이터가 중요하긴 하지만 노드별 역할에 따라 현재 데이터만 필요한 경우도 있고, 과거 데이터가 필요하더라도 최근 데이터만큼 빠른 속도로 액세스 되지 않아도 괜찮은 노드도 존재합니다. 이러한 특성을 이용해서 클레이튼은 과거 데이터를 지우거나 분산 스토리지로 마이그레이션 하는 로직을 만들어 스토리지 활용을 최적화하는 블록체인 스토리지 관리 모듈을 개발 중입니다. 본 세션에서는 이에 대한 이야기를 하고자 합니다. #BlockchainStorage 크러스트유니버스에서 블록체인의 스토리지를 개발하고 있는 이든입니다. 카카오톡의 분산스토리지를 개발했고, 최근에 클레이튼에서 사용하는 블록체인용 스토리지의 최적화와 분산시스템으로의 확장을 고민하고 있습...
데이터베이스 블록체인
컨퍼런스 if kakao
카카오 블록체인 Klaytn의 합의 알고리즘 A to Z / if(kakao)2022
컨퍼런스 if kakao
본 세션에서는 블록체인에 관심이 있는 개발자분들을 위해 분산 시스템의 한 분야에서 시작된 합의 알고리즘이 어떻게 블록체인의 핵심 기술이 되었는지 그 과정을 소개합니다. 더 나아가 카카오 블록체인 클레이튼이 추구하는, 실시간 서비스를 블록체인에서 제공하기 위한 고속 합의 알고리즘을 소개하고 클레이튼의 합의 알고리즘 성능 향상을 위해 개선된 부분을 설명합니다. #DistributedSystem #Consensus #Klaytn 크러스트유니버스의 코어 데브팀에서 클레이튼을 개발하고 있는 루이스입니다. 클레이튼의 강점인 안전성과 성능은 유지하면서 블록체인 플랫폼으로써 확장성과 탈중앙화를 증대시키기 위한 방법들을 고민하고 있습니다. 발표자료 보기 👉https://speakerdeck.com/kakao/ifkakao22-46 if(kakao)2022에 대한 자세한 정보는 👉 https://if.kakao.com if(kakao)2022에 대한 문의는 👉 if@kakaocor...
블록체인
컨퍼런스 if kakao
Preview Blockchain @if(kakao)2022
컨퍼런스 if kakao
if(kakao)2022 컨퍼런스에서 Blockchain 관련 기술 발표 트랙을 소개합니다. 03:40 1. Towards Ethereum Equivalence: 이더리움 동등성을 향해 by 김정현(colin.klaytn) 클레이튼 메인넷부터 개발에 참여했습니다. 더 많은 사람들이 클레이튼을 사랑하고, 사용성이 좋은 더 많은 응용프로그램들이 클레이튼 위에서 개발되기를 노력하며 여러가지 활동들을 하고 있습니다. 04:23 2. 메타버스에 적합한 블록체인은?: Transaction Latency Measurement by 김연주(phoebe.727) 크르스트유니버스 코어 데브 팀 인터페이스 파트에서 개발을 하고 있는 피비입니다. 개발자 뿐만 아니라 일반 사용자들도 클레이튼을 쉽게 사용할 수 있도록 돕기 위해 필요한 다양한 개발에 참여하고 있습니다. 05:12 3. Rosetta API, Klaytn도 지원한다! by 김지민(jamie.1222) 크러스트유니버스 코어 데브팀 제이미...
블록체인
컨퍼런스 if kakao
하나의 블록체인은 하나의 네트워크라고 볼 수 있습니다. 블록체인 내의 한 계정에서 다른 계정으로 자산을 이동하는 것은 어려운 일이 아닙니다. 허나 다른 블록체인으로 자산을 보내는 것은 일반적인 방법으로는 어렵습니다. 상태(state)를 공유하고 있지 않고, 계정 및 프로토콜 등 서로 다른 체계를 사용하기 때문입니다. 본 세션에서는 이종 블록체인 간 자산전송을 가능하게 하는 '브릿지'라는 개념을 소개합니다. 클레이튼의 경우 메인체인과 서비스체인 간의 자산이동이 어떻게 가능한지 기술적으로 설명합니다. 또한 다른 체인의 경우는 이를 어떤 식으로 구현하고 있는지 간략히 짚어봅니다. #Bridge #Multichain 크러스트유니버스에서 클레이튼 코어 데브팀에서 개발을 하고 있는 페퍼입니다. 다양한 블록체인 플랫폼의 기술을 존중하고, 이를 클레이튼 환경과 접목시키는 연결성 기술들에 관심이 많습니다. 발표자료 보기 👉https://speakerdeck.com/kakao/ifkak...
블록체인
컨퍼런스 if kakao
Preview BlockChain @if(kakao)2021
컨퍼런스 if kakao
if (kakao) 2021 컨퍼런스에서 BlockChain 관련 기술 발표 세션을 소개합니다. 1. Klaytn을 이용하여 NFT 활용하기: 발행부터 판매까지 @Colin.Kim 요새 화두가 되고 있는 NFT를 클레이튼에서 어떻게 발행/전송/매매할 수 있는지 살펴보려고 합니다. 또한 미술시장에서 논의되고 있는 추급권을 스마트 컨트랙트를 이용하여 어떻게 구현할 수 있는지 설명합니다. 스마트 컨트랙트를 이용하면 매매 즉시 추급권 및 거래수수료 정산을 마칠 수 있습니다. 이어서 추급권을 포함한 NFT 매매 전체 시나리오를 설명드리고, 남은 향후 과제는 어떤 것들이 있는지 말씀드리고자 합니다. 2. Klaytn Blockchain API의 수평적 확장 @Aidan.Kwon 클레이튼 노드를 개선하여 API 기능에 대한 수평적 확장성을 가지게 만드는 내용입니다. 하나의 노드가 아닌 다수의 클레이튼 노드를 이용하여 API 서비스를 안정적이고 일관되게 제공할 수 있는 구조를 제안합니다. 개...
블록체인