직무 소개
Nexus의 AI 에이전트는 청구 메모를 작성하고, 대변표를 초안하며, 세관 품목을 분류합니다. 각 에이전트는 측정 및 검토를 거쳐 정해진 한도 내에서 유지되어야 하며, 그 측정 기준은 규제 당국이 수용할 수 있는 수준이어야 합니다.
정직한 검토 절차의 일부, 모델의 정직성을 유지하는 골든 세트(Golden Set), 그리고 고객에게 품질을 보고하는 방식을 전담하게 됩니다.
담당 업무
- 에이전트, 스킬, 모델에 대한 평가를 설계하고 실행합니다.
- 서로 다른 계열의 모델을 조합하여 검토 파이프라인을 구축합니다.
- 사용자가 보고한 오류 결과를 지속적인 테스트 케이스로 전환합니다.
- 고객과 감사인이 직접 확인할 수 있는 방식으로 품질을 보고합니다.
- 플랫폼 엔지니어와 협력하여 검토 비용을 낮추고 자주 실행할 수 있도록 만듭니다.
자격 요건
- 언어 모델 또는 ML 시스템을 직접 평가해 본 실무 경험.
- 뛰어난 Python 역량과 우수한 통계적 판단력.
- 다른 엔지니어들이 신뢰하고 사용하는 도구를 구축해 본 경험.
- 단일 지표에 의존하는 것에 대한 건전한 회의적 시각.
- 명확한 작문 능력.
우대 사항
- 규제 산업 분야 또는 모델 리스크 관련 업무 경험.
- 인간 참여형 검토(Human Review) 프로그램 운영 경험.
- EU 인공지능법(AI Act)에 대한 이해.
근무 여건 및 혜택
중요한 현장에서 쓰이는 제품에 대한 실질적인 오너십, 기록하고 문서화하는 팀 문화, 그리고 업무를 제대로 완수할 수 있는 충분한 시간을 제공합니다. 급여, 직급 및 복리후생 조건은 서면 채용 제안서에 명확히 기재됩니다.
채용 절차
- 1차 통화: 채용 매니저와 약 30분간 진행합니다.
- 직무 역량 확인: 직접 구축한 프로젝트를 설명하거나 짧은 과제를 수행합니다.
- 팀 미팅: (실제 문제를 다루는 실무 세션 형태).
- 최종 오퍼: 서면으로 전달됩니다.
모든 전형 단계마다 결과를 안내해 드립니다.