직무 소개
Mercor는 고급 AI 시스템 평가에 사용되는 법률 연구 데이터셋의 루브릭과 정답(ground truth)을 감사할 경험이 풍부한 자격 변호사를 찾고 있습니다. 기존 법률 연구 질문을 검토하고, 모델 답변의 정확성을 검증하며, 채점 루브릭을 개선하여 데이터셋이 현행 법과 건전한 법적 추론을 반영하도록 만들게 됩니다. 단기, 완전 원격 근무입니다.
- * *
책임
- 채점 루브릭의 정확성, 완전성, 일관성, 명확성을 감사합니다.
- 정답이 지배적인 법령, 규정, 판례법에 부합하는지 검증합니다.
- 법적 오류, 시대에 뒤진 권위, 누락된 쟁점, 모호한 채점 기준을 식별합니다.
- 필요한 경우 정답과 루브릭 항목을 다시 작성하거나 수정합니다.
- 검토한 각 항목에 대해 간결하고 구조화된 서면 피드백을 제공합니다.
- * *
업무 분야
데이터셋은 8개 업무 분야에 걸쳐 있습니다. 하나 이상의 분야 경험이 필수이며, 여러 분야에 걸친 폭넓은 경험은 플러스입니다:
- 행정 / 규제
- 기업 및 상사
- 민사 소송
- 헌법 / 시민권
- 형사
- 가사
- 보건
- 이민
- * *
필수 자격
- 법무박사(JD) 및 미국 변호사 자격을 양호한 상태로 보유.
- 5년 이상의 법률 실무 경력.
- 위 업무 분야 중 하나 이상에서 실질적 경험.
- 뛰어난 법률 연구, 분석, 작성 능력.
- 높은 세부 사항 집중력과 일관된 판단을 적용하는 능력.
- * *
우대 자격
- 나열된 여러 업무 분야에 걸친 경험.
- 사법 보좌관, 항소, 정부 또는 로펌 연구 경험.
- 법률 업무 성과물을 검토하거나 채점한 경험, 또는 AI / 법률 기술 평가 프로젝트 경험.
- * *
왜 참여해야 할까요?
- 법률 전문성을 활용하여 AI 시스템의 법률 연구 평가 방식을 형성합니다.
- 선도적인 AI 연구 기관과 협업합니다.