Search Quality Operations Team Leader
Most applications go out cold — see where you stand first. No sign-up to start.
Don't just apply. Show up ready.
Olive works from this exact posting — no sign-up to start.
At a glance
Job overview
Toss is hiring a Search Quality Operations Team Leader. Toss Shopping’s Search Quality Operations Team Leader will design and improve the search system architecture, collaborate with product owners and ML engineers to build a quality operations organization from the ground up, and create large‑scale relevance answer‑set production processes. The role focuses on defining metrics, team structures, and processes to boost search relevance and drive business impact.
Key focus areas include Design search system architecture with engineers to improve quality, Collaborate with product owner and ML engineer to build search quality operations organization, and Create and operate large‑scale relevance answer‑set production system.
Important skills include Search Quality Management, Information Retrieval, Recommender Systems, Data Management, Relevance Judgment Criteria, and Data Quality Control. Preferred (not required): Search Quality Team Setup, Relevance Ground Truth Team Leadership, Commerce Domain Knowledge, and Product Attributes.
Skills & qualifications
Skills
Qualifications
Full job description
토스 Affiliation 정규직 합류하게 될 팀에 대해 알려드려요
-
토스 쇼핑은 금융 슈퍼앱 위에서 고객이 원하는 상품을 정확하게 발견할 수 있는 검색 경험을 만들어요.
-
현재 쇼핑 검색은 쿼리 이해, 리트리벌, 랭킹의 각 레이어를 독립적으로 실험하고 측정할 수 있는 아키텍처로 진화하고 있어요.
-
엔지니어와 함께 검색 시스템을 근본부터 설계해 검색 품질을 개선할 수 있는 기술을 만들어요. 합류하면 함께 할 업무예요
-
검색 Product Owner, ML Engineer와 협업하여 검색 품질 운영, 관리 조직을 0부터 만들어요. 방법론, 평가 지표, 팀 구성 및 운영 프로세스까지 직접 정의해야 해요.
-
검색 Relevance 정답셋을 대규모로 생산하는 체계를 설계하고 운영해요.
-
토스 쇼핑의 검색 품질을 개선하여 비즈니스 임팩트를 만드는 것이 목표예요. 이런 분과 함께하고 싶어요
-
검색 품질 관리, 정보검색(IR), 추천, 데이터 분야에서 경력을 쌓아오신 분
-
검색 품질 평가 및 relevance 판정 기준을 수립하고, 평가자 간 편차를 통제하여 데이터의 품질을 관리해보신 분
-
검수 인력을 채용, 교육, 관리하며 조직을 키우고, 프로세스를 표준화 및 확장해보신 분
-
운영 프로세스를 지표 기반으로 평가하고, 지속적으로 개선한 경험이 있으신 분
-
LLM을 데이터 생산 및 평가에 활용하거나, LLM이 만든 결과를 사람이 검증하는 구조를 설계해본 경험이 있으신 분 이런 경험이 있다면 더 좋아요
-
검색 품질, relevance 정답셋을 다루는 팀을 직접 세팅했거나, 유사한 업무를 하는 팀을 리딩한 경험이 있으면 좋아요.
-
커머스 도메인에서 상품 속성, 패싯(Facet) 데이터를 구축, 검수하거나 검색에 활용해본 경험이 있으면 좋아요.
-
커머스 검색 Knowledge Management - 사전, 온톨로지, 지식그래프 등 검색 지식을 관리, 구축해본 경험이 있으면 좋아요. 토스로의 합류여정
-
서류접수 > 직무 인터뷰 > 문화적합성 인터뷰 > 처우 협의 > 레퍼런스 체크 > 최종 합격 및 입사 View more
토스가 만드는 커머스의 가능성 - 금융이 알고 싶을 때, 토스피드
이제 매달 400만명 넘는 사용자가 토스페이 탭에 찾아와요. 제주도 감귤과 부대찌개 밀키트 등 먹거리부터 의류, 화장품 등이 베스트셀러 목록에 오르고 있고요. 채 서른 명이 안되는 팀원들이 커머스라는 새로운 비즈니스 영역에서 좌충우돌하고 있어요.
You've read the whole posting — now see how you match it.