직무 소개
이 시간제 원격 계약직 역할에서 귀하는 법률 및 규정 준수 주제 전문가(SME)로서 도전적인 전문가 수준의 질문을 만들고, AI가 생성한 법률 및 규제 콘텐츠를 평가하며, 완전하고 논리 정연하며 전문적으로 적절한 답변이 무엇을 포함해야 하는지 정의하는 고품질 루브릭을 설계하게 됩니다.
귀하는 전문화 분야에 따라 법률 분석, 규제 해석, 규정 준수, 쟁점 파악, 리스크 평가, 정책 해석, 계약, 개인정보, 금융 규제, 고용 문제, 기업 규정 준수 또는 관련 분야와 관련된 과제를 개발하게 됩니다.
귀하는 AI가 생성한 답변이 관련 쟁점을 식별하는지, 적절한 규칙이나 기준을 적용하는지, 예외를 인식하는지, 사실과 가정을 구분하는지, 관련 리스크를 다루는지, 근거 없는 결론을 피하는지 평가하게 됩니다.
이 역할의 주요 구성 요소는 루브릭 작성과 평가 설계입니다. 귀하는 미묘한 법적 또는 규제적 판단을 쟁점 식별, 적용 가능한 기준, 분석 품질, 완전성, 예외, 관할권 고려 사항, 리스크 및 전문적 추론을 포괄하는 구조화된 기준으로 전환하게 됩니다.
이 역할은 빠르게 성장하는 AI 데이터 서비스 기업이자 SuperAnnotate의 자회사인 SME Careers 소속으로, 세계 최대 AI 기업 및 파운데이션 모델 연구소 다수에 학습 데이터를 제공합니다. 귀하의 전문성은 법률 및 규정 준수 출력물을 더 정확하고 엄격하며 전문적으로 신뢰할 수 있게 만들어 세계 최고의 AI 모델 개선에 직접적으로 기여합니다.
수행 업무
- 법률 및 규정 준수 과제 생성: 전문가 분석과 전문적 판단을 요구하는 현실적이고 어려운 시나리오를 개발합니다.
- 상세한 루브릭 설계: 관련 쟁점, 규칙, 기준, 분석 단계, 예외, 리스크 및 중대한 오류를 정의합니다.
- AI 생성 분석 평가: 정확성, 완전성, 추론 품질, 관련성 및 전문적 엄격성을 기준으로 답변을 평가합니다.
- 쟁점 파악 검토: 모델이 중대한 법적 또는 규제적 고려 사항을 식별하는지 판단합니다.
- 추론 품질 평가: 근거 없는 결론, 잘못된 규칙 적용, 누락된 예외 및 잘못된 가정을 식별합니다.
- 동료 루브릭 비평: 누락된 쟁점, 모호성, 중복성, 과도한 주관성 또는 부정확한 법적 기대치에 대해 루브릭을 검토합니다.
- 참조 콘텐츠 개발: 고품질 분석, 답변 프레임워크, 비평 및 모범 사례를 작성합니다.
- AI 학습 지원: RL 및 SFT 워크플로를 위한 질문, 루브릭, 평가, 선호도 데이터 및 참조 답변 쌍을 생성합니다.
- 전문적 품질 유지: 콘텐츠가 사실 분석, 법적 해석, 전문적 판단 및 불확실성을 적절히 구분하도록 합니다.
자격 요건
- JD, LLB, LLM, 법학 학위, 규정 준수 자격 또는 명시된 전공 분야와 관련된 동등한 전문 배경.
- 변호사 중심 역할의 경우 전문 법률 자격 또는 변호사 등록이 강력히 우대됩니다.
- 영어에 대한 강한 전문적 능력, 최소 C1.
- 법률, 규제 준수, 법률 연구, 정책, 리스크, 개인정보, 금융 규정 준수, 계약 또는 관련 분야에서 3년 이상의 전문 경력.
- 명확히 정의된 법률, 규제 또는 규정 준수 영역에서 입증된 전문성.
- 쟁점 파악, 해석, 분석 및 판단을 요구하는 도전적인 전문 시나리오를 만들 수 있는 능력.
- 필수 쟁점, 적용 가능한 기준, 추론 단계, 관련 예외, 리스크 및 중대한 누락을 정의하는 루브릭을 설계할 수 있는 강한 능력.
- 정당한 대안적 법적 해석과 객관적으로 결함이 있는 분석을 구분할 수 있는 능력.
- 다른 법률 또는 규정 준수 전문가가 개발한 루브릭을 검토하고 비평하는 데 능숙함.
- 용어, 사실적 가정, 관할권, 권한, 예외, 중대성 및 결론을 평가할 때 강한 세부 사항 주의력.
- 법률 교육, 시험 출제, 동료 검토, 법률 편집, 품질 보증, 정책 초안 작성, 규정 준수 테스트 또는 감독 검토 경험이 강력히 우대됩니다.
- AI 평가, 법률 AI, 데이터 주석, RLHF, 모델 벤치마킹 또는 루브릭 기반 점수 부여 경험이 우대됩니다.