![[팀네이버 컨퍼런스 DAN25] 같은 검색 다른 경험: 검색 품질을 넘어 사용자의 만족으로](https://i.ytimg.com/vi/jE7wst0YT9w/maxresdefault.jpg)
[팀네이버 컨퍼런스 DAN25] 같은 검색 다른 경험: 검색 품질을 넘어 사용자의 만족으로
DAN 2025 네이버 · YouTube
AI 핵심 요약
검색어 단위 품질 지표인 SQM은 검색 결과의 전반적인 상태를 진단하는 데 유용했지만, 같은 검색어를 입력한 사용자들의 서로 다른 의도와 여러 차례 이어지는 검색 여정의 만족도까지 설명하기 어려웠다. 이를 보완하기 위해 하나의 목표를 가진 연속된 검색 행동을 ‘세션’으로 정의하고, 세션 리플레이를 평가해 만든 정답 데이터와 LLM이 확장한 데이터를 바탕으로 세션 만족도 지표를 구축했다. 검색 횟수와 탐색 시간뿐 아니라 클릭·스크롤·재검색 같은 행동의 순서와 조합을 피처로 삼고, 해석 가능한 EBM 모델로 만족도를 추정했다. 이 지표를 A/B 테스트와 개인화 분석에 적용해 평균 점수만으로는 놓치기 쉬운 저품질 경험과 클릭 없이 검색 결과에서 만족하는 사례를 파악했으며, 검색을 넘어 다른 서비스의 사용자 여정 평가로 확장할 가능성을 제시했다.
- 검색어별 점수만으로는 같은 검색어를 입력한 사용자들의 서로 다른 의도와 경험을 구분하기 어렵다.
- 세션은 하나의 목표를 가진 연속된 검색 여정으로 정의하고, 시간 간격과 행동을 고려해 여정을 나눈다.
- 세션 리플레이를 평가해 정답 데이터를 만들고, LLM으로 평가 데이터를 확장해 모델 학습에 활용한다.
- 클릭 여부뿐 아니라 스크롤, 재검색, 빠른 복귀 등 행동의 순서와 조합을 만족도 신호로 삼는다.
- 평균 점수만 보지 말고 저품질 경험이 줄었는지, 어떤 사용자 그룹이 영향을 받았는지도 함께 살펴야 한다.
소개
[팀네이버 컨퍼런스 DAN25] 같은 검색 다른 경험: 검색 품질을 넘어 사용자의 만족으로 좋은 검색이란 무엇이며, 어떻게 측정할 수 있을까요? 작년 이 자리에서 검색어 단위의 품질을 객관적으로 측정하는 SQM을 소개했습니다. SQM은 검색 품질 측정의 훌륭한 기반을 마련해 주었고, 지금도 서비스의 건강 상태를 진단하는 핵심 지표로 활용되고 있습니다. 올해는 그 기반 위에서 한 걸음 더 나아가, '사용자의 만족'이라는 더 본질적인 질문에 답하고자 했습니다. 이번 세션에서는 세션 단위의 만족도 지표를 통해 같은 검색어라도 다른 경험이 나타나는 이유를 살펴봅니다. 이를 통해 개인화 분석, A/B 테스트, 롱테일 질의 등 실제 활용 사례를 공유하며, 앞으로의 검색과 추천, 나아가 다양한 서비스에서 사용자 경험을 한층 더 깊게 이해할 수 있는 가능성을 나누고자 합니다. #DAN #DAN25 #TEAMNAVERCONFERENCE
이 자료가 담긴 로드맵
커뮤니티에서 더 보기비슷한 학습 자료
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] Keynote 01: 검색을 넘어 실행까지: 사용자 경험의 진화
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] Keynote 01: 검색을 넘어 실행까지: 사용자 경험의 진화 [TEAM NAVER Conference DAN25] Keynote 01: From Search to Seamless Action: Evolving User Experience 검색에서 발견과 탐색으로의 확장 여정과, AI 시대를 맞아 에이전트로 진화하는 네이버의 변화 방향을 소개합니다. Introducing the journey of expanding from 'search' to 'discovery and exploration', and NAVER's transformative direction as it evolves into an Agent in the AI era. #DAN #DAN25 #TEAMNAVERCONFERENCE
AI에이전트 개발
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] Deep Dive 01 에이전틱: 서치 개인화와 실행까지 연결하는 검색 경험 [TEAM NAVER Conference DAN25] Deep Dive 01 Agentic Search: Personalized & Actionable Search Experience 네이버의 방대한 데이터를 기반으로 AI가 사용자의 의도와 맥락을 깊이 이해해, 검색이 정보 탐색을 넘어 사용자가 원하는 것을 먼저 제안하고 실행까지 연결하는 네이버 검색의 진화 방향을 소개합니다. In this session, he shares how NAVER Search is evolving from information retrieval to proactive experiences that anticipate user needs and seamlessly connect to action. #DAN #DAN25 #TEAMNAVERCONFERENCE
AI에이전트 개발
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] 사용자가 이끄는 경험, 네이버의 기준이 되다
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] 사용자가 이끄는 경험, 네이버의 기준이 되다 네이버의 경험조직에 대한 소개와 함께 사용자관점이 사업과 서비스의 의사결정에 어떤 과정을 통해 중요한 영향을 미치는지 과정과 경험을 공유하려 합니다. 목차 1. 사용자는 우리에게, 우리는 사용자에게 - 네이버다움 : users as our compass 2. 네이버의 경험조직 - 사용자 관점을 통한 의사결정 : making experience matter 3. 버티컬 경험 측정과 개선 - 경험 측정과 경험 진단 - Life Stage, Life Style, 다양한 persona 개발 4. 횡적 경험 연계를 위한 사용자 리서치 - 전사 서비스를 아우르는 일관된 경험 기준 - 서비스 경계를 넘나드는 사용자 행태 조사 대상 - 효율적이고 빠른 사업/서비스 의사결정 기여에 관심 있는 리서쳐, UXer - 사용자데이터 기반 의사결정이 필요한 프로덕트 리더, PM, PO #DAN #DAN25 #TEAMNAVER...
UI/UX 프로덕트 지표 · 실험
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] 발췌에서 생성으로: 네이버 검색의 진화
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] 발췌에서 생성으로: 네이버 검색의 진화 본 세션에서는 생성형 AI를 활용하여 네이버 검색 결과를 요약 제공하는 AI브리핑 서비스를 소개하고, 서비스 출시 과정의 기술과 노하우를 공유합니다. 서비스를 구성하는 컴포넌트별로 필요한 LLM 모델을 튜닝하고, 파이프라인을 구축하여 서빙하는 과정, 그리고 서비스별 니즈를 만족시키기 위해 특화된 LLM모델링 및 프롬프트 엔지니어링을 수행하는 과정들에 대해 공유합니다. 목차 1. AI브리핑 소개 - 검색과 AI의 만남 - AI브리핑 시스템 overview - AI브리핑의 다양한 라인업 및 성과 2. AI브리핑 시스템 들여다보기 - AI브리핑을 위한 검색 시스템 소개 - 지속가능한 모델 개선 파이프라인 - AI브리핑 등장 후 네이버 검색 품질의 변화 3. 서비스 특화된 AI브리핑 - 다양한 사용자의 요구를 만족하기 위한 차별화된 시도 - Docume...
AI에이전트 개발 자연어 처리
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] NextN Search: 끊임없이 진화하는 네이버 검색
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] NextN Search: 끊임없이 진화하는 네이버 검색 네이버 검색은 언제나 한 방향을 향해 진화해 왔습니다. 사용자가 원하는 정보를 더 정확하게 찾아주고, 양질의 네이버 콘텐츠를 더 효과적으로 보여주는 것, 그것이 변화의 본질입니다. NextN Search는 이러한 목적 아래, 검색 시스템 전반에 걸친 전방위 개편을 시도했습니다. 비효율적인 블록 영역을 최적화하고, 블록 중심의 결과를 개별 콘텐츠 피드 단위로 재구성함으로써 랭킹의 정교함과 해상력을 높였으며, 맞춤형 콘텐츠 추천을 통해 사용자가 체감할 수 있는 개인화 경험을 제공합니다. 본 세션에서는 NextN Search에 적용된 핵심 기술의 개발 과정과 실서비스 적용 경험을 공유합니다. 또한 LLM·VLM을 다양한 검색·추천 태스크에 활용한 실전 노하우를 통해, 최신 AI 모델이 실제 서비스에서 어떤 가치를 만들어내는지 구체적으로 살펴봅니다. 아래는 세션의 주요 목차입니다. NextN Sea...
딥러닝 · 머신러닝 자연어 처리
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] 사용자에 대한 이해로부터 : 검색과 홈피드 서비스의 성장 문법
컨퍼런스 DAN 2025
[팀네이버 컨퍼런스 DAN25] 사용자에 대한 이해로부터 : 검색과 홈피드 서비스의 성장 문법 본 세션에서는 네이버 검색 및 홈피드 서비스의 성장을 정의하는 체계적인 문법을 제안하며, 데이터 분석 관점에서 현재 서비스의 성장 현황을 다양한 사례를 통해 소개합니다. 목차 1. 서비스의 성장을 정의하는 문법 2. 네이버 홈피드 서비스의 성장 문법 3. 네이버 검색 서비스의 성장 문법 대상 - 서비스 성장(Growth) 관련 업무를 담당하는 데이터 분석가 - 서비스 혁신과 개선을 추구하는 개발자 및 엔지니어 - IT 서비스의 데이터 기반 성장 전략에 관심 있는 프로덕트 매니저 - 네이버 검색과 홈피드에서의 일하는 방식이 궁금한 일반 사용자 #DAN #DAN25 #TEAMNAVERCONFERENCE
프로덕트 매니지먼트 프로덕트 지표 · 실험