직무 소개
이 시간제 원격 계약직 역할에서 귀하는 사회과학 및 교육 품질 보증 리드(QAL)로서 사회과학, 교육, 학습 중심 AI 훈련 프로젝트 전반의 품질, 일관성, 트레이너 성과를 감독하게 됩니다. 귀하는 AI가 생성한 사회과학/교육 콘텐츠와 트레이너/QA 작업을 검토하고, 프로젝트 지침에 따라 산출물 품질을 평가하며, 정확한 서면 피드백을 제공하고, 모든 기여자가 기대되는 품질 기준을 준수하도록 보장합니다.
귀하는 개념적 정확성, 연구 리터러시, 교육적 적절성, 사회적 맥락, 방법론 품질, 윤리적 인식, 편향 민감성, 명확성, 형식, 지시 준수, 프로젝트별 평가 기준 준수 측면에서 작업을 평가하게 됩니다. 귀하는 반복되는 품질 문제를 파악하고, 트레이너와 QA에게 업데이트를 전달하며, 온보딩을 지원하고, 문서를 유지 관리하며, 일관되게 작업하지 않는 기여자의 활성화를 돕습니다. 이 역할은 강력한 사회과학 및/또는 교육 전문성, 뛰어난 영어 의사소통 능력, 탁월한 세부 사항 주의력, 구조화된 의사소통, 원격 전문가 팀 전반의 품질 워크플로를 관리하는 능력을 요구합니다.
이 역할은 빠르게 성장하는 AI 데이터 서비스 회사이자 SuperAnnotate의 자회사인 SME Careers에 소속되어 있으며, 세계 최대 AI 기업 및 파운데이션 모델 연구소 다수에 훈련 데이터를 제공합니다. 귀하의 사회과학 및 교육 품질 리더십은 사회과학 및 교육 훈련 데이터가 정확하고, 미묘한 차이를 반영하며, 연구에 기반하고, 윤리적으로 인식되며, 고객 기대에 부합하도록 보장함으로써 세계 최고의 AI 모델 개선에 직접 기여하게 됩니다.
수행 업무
- 품질 모니터링: 사회과학 및 교육 항목을 표본 점검하고, 품질 문제를 파악하며, DM을 통해 지속적인 피드백을 제공하고, 반복되거나 중대한 문제를 에스컬레이션합니다.
- 사회과학 및 교육 검토: AI가 생성한 설명, 수업 콘텐츠, 사회과학 요약, 연구 방법 콘텐츠, 교육 활동, 평가 항목, 학습 안내, 사회적 추론의 정확성과 미묘한 차이를 평가합니다.
- 트레이너 및 QA 소통: Discord에서 트레이너와 QA에게 새로운 항목 지침, 프로젝트 변경 사항, 워크플로 업데이트, 품질 기대치, 사회과학/교육 특화 검토 기준을 전달합니다.
- 질문 처리: 특히 교육 개념, 학습 목표, 연구 방법, 사회적 맥락, 편향, 학생 적절성, 평가 기준 해석과 관련하여 트레이너/QA의 질문에 명확하고 신속하게 응답합니다.
- 트레이너/QA 활성화 관리: 비활성 상태이거나 작업하지 않는 기여자에게 DM을 보내고, 활성화를 독려하며, 후속 조치를 추적하고, 필요 시 가용성 문제를 표시합니다.
- 문서화: 스타일 가이드, 트래커, FAQ, 품질 노트, 예시, 허니팟, 캘리브레이션 작업, 온보딩 자료를 포함한 사회과학/교육 프로젝트 문서를 작성하고 유지 관리합니다.
- 온보딩 및 교육: 트레이너 및 QA와 온보딩/교육 통화를 예약하고 진행하여 프로젝트 기대치, 워크플로, 평가 기준, 품질 기준, 사회과학/교육 특화 요구 사항을 설명합니다.
- 품질 정렬: 모든 트레이너와 QA가 사회과학 및 교육 검토 지침을 일관되게 적용하고 프로젝트 발전에 따른 업데이트를 이해하도록 보장합니다.
- 편향 및 윤리 검토: 고정관념, 낙인찍는 언어, 집단에 대한 근거 없는 주장, 약한 인과 추론, 빈약한 교육적 스캐폴딩, 윤리적으로 문제가 있는 콘텐츠를 표시합니다.
- 프로세스 개선: 반복되는 품질 격차를 파악하고, 워크플로 개선을 제안하며, 사회과학 및 교육 AI 훈련 프로젝트를 위한 확장 가능한 QA 프로세스 구축을 돕습니다.
자격 요건
- 교육학, 사회학, 심리학, 인류학, 정치학, 사회복지학, 공공정책, 교육심리학, 교육과정학 또는 관련 분야의 학사, 석사, 박사, 교원 자격증 또는 동등한 전문 경력.
- 프로젝트 지침을 따르고, 팀과 소통하며, 명확한 서면 피드백을 제공할 수 있는 강력한 영어 이해력.
- 교육, 교육과정 개발, 사회과학 연구, 교육 콘텐츠 검토, 교수 설계, 학술 작문, 사회 정책, 학생 평가 또는 관련 검토 워크플로에서 3년 이상의 경력.
- 사회과학 개념, 교육 이론, 교수법, 학습 성과, 평가 설계, 연구 방법, 윤리, 편향, 문화, 사회 제도, 불평등, 증거 기반 추론에 대한 강력한 이해.
- 상세한 평가 기준에 따라 사회과학/교육 콘텐츠를 평가하고, 근거 없는 일반화, 고정관념, 약한 인과 주장, 빈약한 교수 설계, 편향된 프레이밍, 결함 있는 방법론, 연령에 부적절한 교육 콘텐츠 등의 문제를 파악하는 능력.
- 교실 학습, 평가, 수업 계획, 사회 연구, 질적/양적 방법, 교육 형평성, 아동 발달, 학습 과학, 교육과정 표준 등의 영역에 대한 친숙함 우대.
- 교육자, 연구자, 교육과정 작성자, 검토자, 주석자, 트레이너 또는 QA로 구성된 원격 팀을 이끌거나 지원한 경력 강력 우대.
- Discord, Google Sheets, Google Docs, 트래커, 대시보드, 프로젝트 관리 시스템 등의 도구를 사용하여 빠르게 변화하는 원격 환경에서 작업하는 데 익숙함.
- 세부 사항 지향적이고 조직력이 뛰어나며, 스타일 가이드, FAQ, 트래커, 온보딩 자료, 허니팟, 캘리브레이션 작업, 문서를 유지 관리하는 능력.
- AI 훈련, 데이터 주석, LLM 평가, 사회과학 QA, 교육 QA, 교육과정 검토 또는 평가 기준 기반 검토 경력 강력 우대.