본문으로 이동
Fine-tuning 없이, 프롬프트 엔지니어링으로 메뉴 이미지 검수하기 #우아콘2024 #우아한형제들
컨퍼런스

Fine-tuning 없이, 프롬프트 엔지니어링으로 메뉴 이미지 검수하기 #우아콘2024 #우아한형제들

우아콘 2024 우아한형제들 · YouTube

원문 보기

AI 핵심 요약

사람이 하루 1만 건 이상 처리하던 배달의민족 메뉴 이미지 검수를 자동화하기 위해, 별도 파인튜닝 없이 GPT 비전과 프롬프트 엔지니어링을 적용했습니다. 정책을 구체적인 항목으로 나누고 유관 부서와 범위를 맞추며 프롬프트를 반복 수정했고, JSON 출력과 파라미터 조정으로 응답의 구조와 일관성을 개선했습니다. 영어 프롬프트로 토큰과 응답 시간을 줄이는 한편, 객체를 정확히 탐지해야 하는 경우에는 별도 파인튜닝 모델을 쓰고 저작권처럼 판단이 까다로운 항목은 사람 검수로 넘겼습니다. 자동 검수 기능을 서비스에 적용해 기존보다 검수 시간을 99.98% 단축했으며, 문제 정의와 모델의 한계를 초기에 함께 검토해야 한다는 점을 배웠습니다.

  • 정책 문구는 모호한 표현을 피하고, 실제 사례를 바탕으로 적용 범위와 예외를 구체화하세요.
  • 모델의 판단 근거와 서비스에서 필요한 결과 형식을 먼저 정한 뒤 JSON 출력이나 JSON 모드로 구조화하면 후처리가 쉬워집니다.
  • 사실 기반 분류에는 temperature와 top-p를 낮춰 보고, 이미지 설명을 먼저 생성한 뒤 판정하는 단계적 접근도 검토하세요.
  • 프롬프트만으로 해결하기 어려운 객체 위치 판별이나 저작권 판단은 전용 모델 또는 사람 검수와 결합해야 합니다.

소개

[WOOWACON2024 세션 다시보기] 👉 세션 설명 ㅤ 메뉴 이미지의 품질 검수를 프롬프트 엔지니어링을 통해 GPT로 자동화한 여정을 소개합니다. 배달의민족의 수많은 음식 메뉴 사진을 사람이 하나하나 검수하던 과정을 어떻게 GPT로 자동화했는지, 그리고 그 과정에서 겪었던 다양한 시행착오와 배움을 공유합니다. ㅤ 👉 발표자 소개ㅤ 김태정, PM 오혜진, 데이터 분석가

비슷한 학습 자료

컨퍼런스 우아콘 2024

[WOOWACON2024 세션 다시보기] 👉 세션 설명 ㅤ 하루 150만 건의 배달을 어떻게 잘 배차할 수 있을까? 분할 정복을 넘어선 지역 최적화의 경험을 바탕으로, 데이터와 머신러닝을 활용해 서비스와 도메인을 개선한 사례를 공유합니다. ㅤ 👉 발표자 소개ㅤ 윤대영, 서버 개발자 박영수, 데이터 과학자

알고리즘 · 자료구조 딥러닝 · 머신러닝

컨퍼런스 우아콘 2024

[WOOWACON2024 세션 다시보기] 👉 세션 설명 ㅤ 배달의 민족은 전국 식당들의 메뉴와 주문 뿐만아니라 커머스 대형 셀러들과 연동하여 실시간 배달 서비스를 제공하고 있습니다. 제공하는 서비스에서 발생하는 하루 평균 200억 건의 데이터가 흘러가는 시스템을 안정적으로 구축하고 운영한 사례를 공유드립니다. 1부: 시스템 아키텍처 편 대용량 데이터 처리 시스템을 도입하는 과정에서의 고민과 적용한 기술 그리고 아키텍처를 설명합니다. 2부: 음식 배달, 물건 배달 서비스 구축 편 데이터 정합성과 재처리 복원 등을 고려한 가장 안정적이고 지속가능한 시스템 구조를 만들기 위한 고민과 해결사례를 공유합니다. ㅤ 👉 발표자 소개ㅤ 김민중, 서버 개발자 장재주, 서버 개발자 윤보민, 서버 개발자 김병화, 서버 개발자

백엔드 데이터베이스

컨퍼런스 우아콘 2024

[WOOWACON2024 세션 다시보기] 👉 세션 설명 ㅤ 배달의민족 서비스에서 사용되는 시간을 예측하는 시스템을 설명하고, 다양한 서비스 적용 사례를 다룹니다. AI 모델 개발 사례와 추론 아키텍처를 설명하고, 수많은 변수에 좌우되는 ‘시간’을 정확하게 예측하기 위해 고민하고 개선했던 경험을 전달합니다. ㅤ 👉 발표자 소개ㅤ 한상윤, 데이터 엔지니어 김동인, 데이터 과학자

백엔드 딥러닝 · 머신러닝 로드맵 1개에 담김

컨퍼런스 우아콘 2024

[WOOWACON2024 세션 다시보기] 👉 세션 설명 ㅤ 방대한 컴포넌트 라이브러리와 빼곡한 원칙들이 존재함에도 불구하고, 우리는 왜 끊임없이 새로운 시스템을 만들어야 할까요? 디자인 시스템을 단순 스타일 가이드를 넘어 진정한 '시스템'으로 작동하게 하려면 어떻게 해야 할까요? 1년 6개월간 “우아한형제들”의 디자인 시스템 여정을 통해 얻은 인사이트를 공유하며, Base Component와 Foundation API를 통해 코드를 효과적으로 연결하고, 이를 통해 디자이너와 엔지니어의 비효율적인 프로세스를 최소화하고, 보다 중요한 고민에 집중할 수 있는 방법들을 소개합니다. ㅤ 👉 발표자 소개ㅤ 허준, UX엔지니어

프론트엔드 UI/UX

컨퍼런스 우아콘 2024

[WOOWACON2024 세션 다시보기] 👉 세션 설명 ㅤ AI 데이터 분석가 '물어보새'는 우아톤 2023을 통해 탄생한 프로덕트로, 구성원의 목소리를 반영하여 Text-to-SQL, Data Discovery 등 다양한 데이터 리터러시 기능을 갖춘 서비스로 발전하였습니다. 지난 6개월 동안 TF 구성원들과 함께 고군분투하며 만든 새로운 AI 서비스 '물어보새'의 개발기를 들려드립니다. ㅤ 👉 발표자 소개ㅤ 성한영, 데이터 과학자 이규철, 데이터 과학자

데이터베이스 인공지능 기타

컨퍼런스 우아콘 2023

[WOOWACON2023 세션 다시보기] 👉 세션 설명 10월 17일, 사용자의 맥락에 맞춰 메뉴를 제안하는 서비스가 송파 지역에 베타 오픈합니다. 배달의 민족에서 처음으로 선보이는 GPT 기술 활용 프로젝트가 어떻게 생겨나게 되었는지, 어떤 고민을 거쳐 세상에 태어나게 되었는지 공유드립니다.ㅤ ㅤ 👉 발표자 소개 GPT서비스팀 오혜진 서비스 기획자, 데이터 프로덕트 PM, 데이터 분석가를 거쳐 생성 AI 기반 프로덕트를 만들고 있습니다. 👍 추천 대상 - 다양한 프로덕트 기획을 고민하는 PM - 요즘 핫하다는 GPT로 뭘 할 수 있을지 궁금한 분 - 새로운 기술을 서비스에 도입하는 험난한 과정이 궁금한 분 🙋🏻‍♀️ 세션에 대해 궁금한 점이 있다면 dev_relations@woowahan.com 으로 문의주시기 바랍니다.

인공지능 기타 프로덕트 매니지먼트