[매드업] [제품 본부] 데이터 오퍼레이션 매니저 - 3년 이상

[모집기간]

09월 01일 ~ 09월 30일

[담당업무]

-레이블링 프로젝트 운영: PO, AI Engineer 등 유관부서와 협업하여 데이터 구축 범위와 우선순위를 정의하고, 일정·리소스·산출물을 관리하여 모델 학습 및 평가에 필요한 데이터 구축을 주도합니다.

-레이블링 운영 및 프로세스 개선: 신뢰할 수 있는 레퍼런스 데이터셋(골든셋)을 직접 구축해 레이블링 기준을 정립하고, 레이블러 운영 체계와 자동화·프로세스 개선을 통해 데이터 생산성과 일관성을 높입니다. 

-데이터 품질 및 자산관리: 레이블링 가이드와 검수 체계를 운영하고, 데이터셋의 품질·버전·권한을 관리하여 신뢰할 수 있는 데이터 자산을 구축합니다.

-AI Agent 평가 데이터 설계: AI Agent 및 LLM 성능 평가를 위한 벤치마크·평가 데이터셋을 설계하고, RLHF/Human Feedback 데이터 구축과 LLM-as-a-judge 기반 자동 평가 체계를 운영합니다.

[자격요건]

-3년 이상의 데이터 레이블링 프로젝트 운영 경험 또는 데이터 레이블링 외주 프로젝트 리딩 경험이 있으신 분

-레이블링 가이드라인을 직접 작성하고 운영·버전 관리한 경험이 있으신 분

-인하우스 레이블러 또는 외부 파트너를 교육·관리하며 운영 체계를 구축한 경험이 있으신 분

-품질 지표(정확도, 작업자 간 일치도, 재작업률 등)를 활용해 데이터 품질을 개선한 경험이 있으신 분

-AI Engineer, PO 등 유관 부서와 원활하게 협업할 수 있는 커뮤니케이션 및 문서화 역량을 보유하신 분

-비즈니스 요구사항과 기술적 요구사항을 이해하고 데이터 기반 의사결정을 수행할 수 있는 분

-필요시 직접 레이블링, 검수를 병행하며 데이터 품질과 기준을 확보한 경험이 있으신 분

[우대사항]

-Claude Code 등 AI Coding Agent를 활용한 업무 자동화 프로세스 구축 경험이 있으신 분

-RLHF/Human Feedback 데이터 구축, LLM 기반 자동 레이블링 또는 LLM-as-a-judge 평가 체계 운영 경험이 있으신 분

-AI Agent 및 LLM 성능 평가를 위한 벤치마크·평가 데이터셋을 설계하거나 운영해 보신 분

-프롬프트 엔지니어링, 딥러닝 모델 개발 등 데이터셋 기반 AI 성능 개선 프로젝트에 참여하신 분

-Python, SQL 또는 스프레드시트 함수를 활용한 데이터 가공·분석 및 업무 자동화 경험이 있으신 분

-Label Studio 등 오픈소스 레이블링 플랫폼을 구축하거나 운영해 보신 분

-이미지·영상 등 비정형 데이터 또는 개인정보 포함 데이터셋 운영 경험이 있으신 분

-디지털 마케팅 및 온라인 광고 도메인에 대한 이해를 보유하신 분

[채용공고]