문서

얼굴 인식의 역사와 페이스페이의 미래

토스 페이스모델링팀 토스 · 토스 기술 블로그

AI 핵심 요약

얼굴인식은 Bledsoe의 수작업 특징점 기록에서 출발해 Kanade의 자동 특징 추출, PCA 기반 Eigenface, LBP와 머신러닝, 딥러닝으로 발전하며 조명과 촬영 환경의 한계를 극복해 왔다. 글은 이 기술을 결제에 적용할 때 빠른 사용자 경험과 높은 보안 수준을 동시에 만족해야 한다는 과제를 제시하고, 토스 페이스페이가 단말기와 서버의 처리를 조합해 얼굴 식별과 결제를 수행한다고 설명한다. 통신·이미지 암호화, Matrix Projection 기반 취소 가능한 생체정보, 접근 제한, 다중 센서 Anti-Spoofing으로 유출과 위변조 위험에 대응하며, NIST FRTE 평가를 통해 성능을 검증했다고 소개한다. 핵심 교훈은 얼굴인식의 실서비스화에는 모델 정확도뿐 아니라 데이터 품질, 시스템 구조, 프라이버시와 제도적 보호를 함께 설계해야 한다는 점이다.

PCA 기반 Eigenface는 얼굴을 평균 얼굴에서 벗어나는 패턴의 조합으로 표현해 비교한다.
LBP는 주변 픽셀과의 밝기 차이를 이진 코드로 바꿔 조명 변화에 덜 민감한 질감 특징을 만든다.
얼굴 결제에서는 단말기와 서버의 처리 위치를 나눌 때 속도·정확도·프라이버시·운영 비용을 함께 고려해야 한다.
생체정보 보호에는 전송 암호화뿐 아니라 취소 가능한 생체인증, 접근 통제, 제도적 검증을 함께 적용할 수 있다.
사진·영상·마스크 공격을 막으려면 RGB, 적외선, 깊이 정보 등 여러 신호를 결합해 실제 사람인지 판별해야 한다.

소개

기계가 사람의 얼굴을 기억하기까지, 60년 간의 여정을 따라가다

비슷한 학습 자료

컨퍼런스 if kakao

모바일 얼굴인식 SDK 개발 / if(kakao)2022

컨퍼런스 if kakao

딥러닝 기반의 얼굴인식 모델을 처리 성능이 빈약한 모바일 및 전용장비에 적용하기 위한 최적화 방법에 대해서 공유하고자 합니다. #FacialRecognition 카카오엔터프라이즈 비전인텔리전스팀의 앤드루와 포입니다. 얼굴인식을 모바일에 적용하는 일을 하고 있습니다. 발표자료 보기 👉https://speakerdeck.com/kakao/ifkakao22-68 if(kakao)2022에 대한 자세한 정보는 👉 https://if.kakao.com if(kakao)2022에 대한 문의는 👉 if@kakaocorp.com #카카오 #이프카카오 #개발자컨퍼런스 #기술 #개발 #ifkakao2022

딥러닝 · 머신러닝 컴퓨터 비전

책 웨이멍 리 예스24

허깅페이스 인 액션

책 웨이멍 리 예스24

트랜스포머부터 NLP, 비전, 파인튜닝, RAG, 에이전트까지, 허깅페이스로 익히는 실전 AI 시스템 허깅페이스는 모델과 라이브러리, 개발 도구를 한곳에서 활용할 수 있어 오늘날 AI 개발에서 빼놓기 어려운 플랫폼으로 자리잡았습니다. 이 책은 트랜스포머와 허깅페이스 허브의 기본 사용법부터 자연어 처리, 컴퓨터 비전, 데이터셋 활용, 모델 파인튜닝, 멀티모달 모델까지 차근차근 다루며, 이후에는 랭체인과 라마인덱스를 활용한 LLM 애플리케이션, RAG 기반 질의응답, 에이전트, 그라디오 웹 인터페이스, GPT4All을 이용한 로컬 LLM, MCP를 활용한 외부 도구 연동으로 확장해 나갑니다. 이론만 길게 설명하기보다 코드와 예제를 중심으로 설명하므로, 파이썬과 넘파이, 판다스를 사용할 수 있는 독자라면 AI 개발 경험이 많지 않아도 충분히 시작할 수 있습니다.

딥러닝 · 머신러닝 컴퓨터 비전 자연어 처리