직무 소개
이 시간제 원격 계약직 역할에서, 귀하는 수학 품질 보증 리드(QAL)로서 수학 AI 훈련 프로젝트 전반의 품질, 일관성, 트레이너 성과를 감독하게 됩니다. AI가 생성한 수학 콘텐츠와 트레이너/QA 작업을 검토하고, 프로젝트 지침에 따라 출력 품질을 평가하며, 정확한 서면 피드백을 제공하고, 모든 기여자가 기대되는 품질 기준을 준수하도록 보장합니다.
귀하는 수학적 정확성, 논리적 추론, 계산 정확성, 증명 타당성, 표기 품질, 명확성, 형식, 지시 준수, 프로젝트별 평가 기준 준수 측면에서 작업을 평가하게 됩니다. 반복되는 품질 문제를 발견하고, 트레이너와 QA에게 업데이트를 전달하며, 온보딩을 지원하고, 문서를 유지 관리하며, 일관되게 작업하지 않는 기여자의 활성화를 돕습니다. 이 역할은 강력한 수학 전문성, 뛰어난 영어 의사소통 능력, 탁월한 세부 사항 주의력, 구조화된 의사소통, 원격 기술 팀 전반의 품질 워크플로를 관리하는 능력을 요구합니다.
이 역할은 빠르게 성장하는 AI 데이터 서비스 회사이자 SuperAnnotate의 자회사인 SME Careers에 소속되어 있으며, 세계 최대 AI 기업 및 파운데이션 모델 연구소 다수에 훈련 데이터를 제공합니다. 귀하의 수학 품질 리더십은 수학 훈련 데이터가 정확하고, 논리적으로 건전하며, 명확하게 설명되고, 잘 문서화되며, 고객 기대에 부합하도록 보장함으로써 세계 최고의 AI 모델 개선에 직접적으로 기여하게 됩니다.
선발 과정은 AI 인터뷰, 도메인별 과제, 채용 담당자와의 인터뷰로 구성됩니다.
수행할 업무
- 품질 모니터링: 수학 항목을 표본 검사하고, 품질 문제를 식별하며, DM을 통해 지속적인 피드백을 제공하고, 반복되거나 중대한 문제를 에스컬레이션합니다.
- 수학 검토: AI가 생성한 수학 설명, 증명, 유도, 계산, 문장제 문제 풀이, 도표/설명, 단계별 추론을 정확성과 명확성 측면에서 평가합니다.
- 트레이너 및 QA 소통: Discord에서 트레이너와 QA에게 새 항목 지침, 프로젝트 변경 사항, 워크플로 업데이트, 품질 기대치, 수학 관련 검토 기준을 업데이트합니다.
- 질문 처리: 트레이너/QA의 질문, 특히 추론 타당성, 표기, 가정, 풀이 방법, 증명 구조, 형식, 평가 기준 해석에 관한 질문에 명확하고 신속하게 응답합니다.
- 트레이너/QA 활성화 관리: 비활성 상태이거나 작업하지 않는 기여자에게 DM을 보내고, 활성화를 독려하며, 후속 조치를 추적하고, 필요 시 가용성 문제를 표시합니다.
- 문서화: 스타일 가이드, 트래커, FAQ, 품질 노트, 예시, 허니팟, 캘리브레이션 과제, 온보딩 자료를 포함한 수학 프로젝트 문서를 작성하고 유지 관리합니다.
- 온보딩 및 훈련: 트레이너 및 QA와 온보딩/훈련 통화를 예약하고 진행하여 프로젝트 기대치, 워크플로, 평가 기준, 품질 기준, 수학 관련 검토 요건을 설명합니다.
- 품질 정렬: 모든 트레이너와 QA가 수학 지침을 일관되게 적용하고 프로젝트가 발전함에 따라 업데이트를 이해하도록 보장합니다.
- 오류 패턴 분석: 추론 단계 누락, 잘못된 단순화, 잘못된 공식, 표기 불일치, 산술 실수, 또는 정답이지만 근거가 부실한 답변 등 반복되는 문제를 식별합니다.
- 프로세스 개선: 반복되는 품질 격차를 식별하고, 워크플로 개선을 제안하며, 수학 AI 훈련 프로젝트를 위한 확장 가능한 QA 프로세스 구축을 돕습니다.
자격 요건
- 수학, 응용수학, 통계학, 물리학, 공학, 컴퓨터과학, 수학교육 또는 이와 밀접한 정량 분야의 학사, 석사 또는 박사 학위.
- 프로젝트 지침을 따르고, 팀과 소통하며, 영어로 명확한 수학 피드백을 제공할 수 있는 강력한 영어 능력.
- 수학, 교육, 튜터링, 연구, 정량 분석, 기술 문서 작성, 교육과정 개발, 문제 출제, 평가 설계, 수학 콘텐츠 검토 분야에서 3년 이상의 전문 경력.
- 대수학, 기하학, 삼각법, 미적분학, 선형대수학, 이산수학, 확률, 통계학, 정수론, 조합론, 미분방정식, 수학적 증명 등 핵심 수학 주제에 대한 강한 이해.
- 상세한 평가 기준에 따라 수학 콘텐츠를 평가하고, 잘못된 가정, 결함 있는 추론, 타당하지 않은 증명, 계산 오류, 표기 문제, 누락된 단계, 환각된 사실, 불완전한 설명 등의 문제를 식별하는 능력.
- 개념 설명과 단계별 풀이 모두를 검토하는 데 익숙하며, 각 단계가 이전 단계에서 논리적으로 이어지는지 여부를 포함합니다.
- LaTeX, Python, MATLAB, R, WolframAlpha/Mathematica, GeoGebra, Desmos, 스프레드시트 모델링, 기호 연산 도구 등 수학 도구나 워크플로에 익숙한 경우 우대.
- 트레이너, 주석자, 검토자, 교육자, 기술 문서 작성자, QA로 구성된 원격 팀을 이끌거나 지원한 경력이 있는 경우 강력히 우대.
- Discord, Google Sheets, Google Docs, 트래커, 대시보드, 프로젝트 관리 시스템 등의 도구를 사용하여 빠르게 변화하는 원격 환경에서 작업하는 데 익숙함.
- 세부 사항에 매우 주의하고 조직적이며, 스타일 가이드, FAQ, 트래커, 온보딩 자료, 허니팟, 캘리브레이션 과제 및 기타 품질 문서를 유지 관리하는 능력.
- AI 훈련, 데이터 주석, 대규모 언어 모델, 프롬프트/응답 평가, 수학 콘텐츠 QA, 평가 기준 기반 LLM 평가 경험이 있는 경우 강력히 우대.
- 펀자브어 원어민 수준의 유창성