company logo
티맵모빌리티(주)

AI Agent Evaluation Engineer

Pre IPO
누적 투자 6,000억↑
301-1,000명
  • 공고소개
  • 주요업무
  • 자격요건
  • 우대사항
  • 채용절차
  • 기타안내
이 포지션에 합격해 입사하시면 리멤버에서 합격 보상금 50만원을 드립니다
티맵모빌리티(주) 조직 이미지
20년 이상 쌓아온 신뢰 위에, 모빌리티 라이프의 새로운 기준을 만듭니다. 티맵모빌리티는 20년 이상 축적해온 서비스 운영 노하우와 방대한 이동 데이터를 기반으로, 늘 그래왔듯 사람들의 이동을 더 나은 방향으로 안내하는 새로운 모빌리티 기준을 만들어가고 있습니다. 대한민국 No.1 내비이자 ‘국민 내비’로 자리 잡은 내비게이션 서비스를 중심으로 우리는 이동 전·중·후의 모든 순간을 하나의 경험으로 연결하고 있습니다. ‘카 라이프’, ‘어디갈까’, ‘로컬 맛집’, ‘AI Voice Agent’ 등은, 티맵모빌리티가 보유한 독보적인 이동 데이터를 기반으로, 사용자의 일상과 이동을 더 똑똑하고 편리하게 변화시키는 서비스들입니다. 실제 이동 데이터를 기반으로 한 믿을 수 있는 정보, 차 안에서 AI 에이전트와 자연스럽게 이어지는 대화형 안내 경험, 그리고 사용자의 취향과 맥락을 반영한 장소 추천 기능까지— 티맵은 일상에 스며든 이동 속 숨은 가치를 찾아 연결하는 스마트 모빌리티 플랫폼으로 진화하고 있습니다. 시대가 요구하는 모빌리티의 새로운 길을 찾고 제시하는 일. 그 여정에 함께할 동료를 기다립니다.

주요업무

• AI Agent 품질 지표(metrics)를 정의·수립하고, 이를 자동화된 평가 파이프라인으로 구현·운영합니다. • 제품의 특징과 목적을 이해하고 이를 반영한 사용자 중심 시나리오 설계 및 평가합니다. • 실제 Application 환경에서 AI Agent가 기대하는 품질 수준을 충족하는지 end-to-end QA 관점으로 검증합니다. • Agent의 내부 동작(planning, tool call, reasoning 등)과 외부 결과물을 연계 분석하여 품질 문제 진단합니다. • 운영 중인 Agent 서비스 품질 모니터링, 이상 징후 탐지 및 지속 개선합니다. • 평가 체계 고도화를 위한 리서치 활동합니다. (예: LLM-as-a-judge, synthetic test data 생성 등)

자격 요건

• AI Model / AI Agent / AI Service 품질 평가 관련 경력 1년~5년 이상이거나 이에 준하는 경험을 보유하신 분 • Application 레벨 시나리오 기반의 end-to-end 테스트 경험을 보유하신 분 • 제품 특성을 고려한 사용자 중심 QA 시나리오 설계·평가 경험을 보유하신 분 • 대규모 서비스 또는 AI 프로젝트에서 품질 관리 및 개선을 주도한 경험을 보유하신 분 • Python 등 프로그래밍 언어 능숙하신 분 (테스트 자동화, 데이터 처리/분석 스크립트 작성 가능) • 머신러닝/딥러닝 및 LLM 기반 Agent 구조·동작 원리에 대한 이해도를 보유하신 분 • 평가지표 정의 및 자동화된 평가/QA 파이프라인 구축 경험을 보유하신 분 • 로그 분석 및 디버깅을 통한 오류 원인 추적 역량을 보유하신 분 • 리서치 기반 탐색 경험을 보유하신 분 (예: synthetic data 생성, 평가용 LLM 활용, 새로운 지표 정의) • 품질 이슈를 명확히 정의·문서화하여 팀에 공유할 수 있는 능력을 보유하신 분 • 개발/QA/Product 팀과의 cross-functional team 협업 경험을 보유하신 분 • 기술적 문제를 비기술적 이해관계자도 이해할 수 있게 설명할 수 있는 역량을 보유하신 분 • 품질 개선을 위한 적극적 제안과 피드백 제공 태도를 보유하신 분

우대사항

• AI Agent 또는 대화형 시스템 평가 경험을 보유하신 분 • human-in-the-loop 평가 시스템 설계 경험을 보유하신 분 • synthetic/adversarial test data generation 경험을 보유하신 분 • 클라우드 환경(AWS, Azure, GCP 등) 기반 개발 및 운영 경험을 보유하신 분 • AI 윤리성, 공정성, 설명 가능성(Explainability) 관련 지식을 보유하신 분

채용절차

서류 > 과제 > 1차 인터뷰 > 2차 인터뷰(인성검사 포함) > 처우협의 > 최종합격

기타안내

[티맵모빌리티만의 자유로운 근무환경!] • 근무시간은 본인이 계획해서! 4주 단위 160시간으로 본인이 스스로 계획해서 일해요. • 일할 땐 일하고, 쉴 땐 푹 쉬는 Happy Friday! 근로시간을 조절하여 매월 금요일 중 하루를 쉬어요. • 마음 편히 휴가 갈 수 있는 체력단련휴가! 연차 외 연 최대 5일의 휴가를 추가로 드려요. • 휴가에는 사유가 없습니다! 사유 기재 및 승인 필요 없는 자유로운 연차/반차 사용 가능해요. • 오랫동안 함께해줘서 고마워요! 재직 3년마다 30일의 유급 휴가를 드려요. • 우리는 모두 '님'! 모두 '님'으로 호칭하며 자유롭게 의견교환하고 서로 존중해주는 수평적인 문화예요. • 다양한 컨셉의 휴게 공간! 공용 라운지, 휴게실, 수면실, 폰부스, 스낵자판기 등 있어요. [티맵모빌리티만의 구성원을 위한 최고의 복지!] • 자기계발도 중요하니까! IT기기, 교육, 여행, 운동, 가족검진, 휴양소 등 자기계발을 위한 복리후생비 연간 360만원을 지원해요. • 건강하고 행복한 삶을 위해! 40만원 한도 내 협약 검진 프로그램을 지원해요. • SKT 이용자라면! 월 최대 10만원의 통신요금을 지원해요. • 생일축하합니다! 생일에는 SK Pay 10만 포인트를 지원해요. • 들을까 말까 망설이지 마세요! 직무와 관련된 교육 연 100만원을 지원해요. • 농수산물 구입까지! ‘자연이랑’ 연 60만 포인트를 지원해요. • 가족까지 챙겨드리는! 본인, 배우자, 자녀, 양가 부모님까지 의료비를 지원해요. • 자녀가 있다면! 자녀학자금을 지원해요. • 집 걱정을 덜어드리는! 금융기관 이자를 지원해요. 이외에도 최신형 장비, 허먼밀러의자, 독감 예방 접종비, 경조금/경조휴가 지원 등의 기본 복지를 포함하여 다양한 복지를 제공하고 있습니다!
이 포지션에 필요한 전문분야/기술
Python
JAVA
데이터분석
데이터
데이터플랫폼
회사 로고
티맵모빌리티(주)
정보 보기
누적 투자 금액
6733억원 이상
투자사
케이비국민은행, 어펄마캐피탈매니저스코리아, 이스트브릿지프라이빗에쿼티, 에스케이텔레콤
리멤버에서 수집한 기업 정보입니다. 정보 수정이 필요할 경우, 아래 경로로 요청해 주세요.
리멤버 앱 > 더보기 > 1:1 문의
company logo
티맵모빌리티(주)

AI Agent Evaluation Engineer

Pre IPO
누적 투자 6,000억↑
301-1,000명
직급/직책기타
연봉협의
근무지서울특별시 중구
경력1년 이상
학력학력 무관
마감일
채용 시 마감
이 공고를
주변에도 알려주세요