직무 소개
AI의 미래를 만들어가고 싶은 AI QA 전문가이신가요? 대규모 언어 모델은 영리한 챗봇에서 엔터프라이즈급 플랫폼으로 진화하고 있습니다. 엄격한 평가 데이터와 함께라면, 미래의 AI는 세계적 수준의 교육을 민주화하고, 최첨단 연구와 보조를 맞추며, 전 세계 팀의 워크플로를 간소화할 수 있습니다. 그 품질은 바로 당신에게서 시작됩니다—모델의 추론 능력과 신뢰성을 강화하려면 당신의 전문성이 필요합니다.
우리는 모델 평가, LLM 안전성, 프롬프트 견고성, 데이터 품질 보증, 다국어 및 도메인 특화 테스트, 근거 검증, 컴플라이언스/준비 상태 점검을 몸소 실천하는 AI QA 트레이너를 찾고 있습니다. 당신은 할루시네이션 탐지, 사실 일관성, 프롬프트 인젝션 및 탈옥 저항성, 편향/공정성 감사, 추론 체계의 신뢰성, 도구 사용 정확성, 검색 증강 충실도, 엔드투엔드 워크플로 검증과 같은 과제에서 고급 언어 모델에 도전하게 됩니다—우리가 기준을 높일 수 있도록 모든 실패 모드를 문서화해 주세요.
일반적인 하루는 실제 시나리오와 평가 프롬프트를 가지고 모델과 대화하고, 사실 정확성과 논리적 타당성을 검증하며, 테스트 계획과 회귀 테스트 스위트를 설계하고 실행하고, 명확한 평가 기준과 합격/불합격 기준을 수립하고, 근본 원인 가설과 함께 재현 가능한 오류 추적을 기록하며, 프롬프트 엔지니어링, 가드레일, 평가 지표(예: 정밀도/재현율, 충실성, 독성, 지연 시간 SLO)에 대한 개선을 제안하는 것으로 구성됩니다. 또한 적대적 레드팀 활동, 자동화(Python/SQL), 시간 경과에 따른 품질 변화를 추적하기 위한 대시보드 구축에도 함께 참여하게 됩니다.
컴퓨터 과학, 데이터 과학, 계산 언어학, 통계 또는 관련 분야의 학사, 석사 또는 박사 학위가 이상적입니다; ML/AI 시스템의 QA 출시 경험, 안전성/레드팀 경험, 테스트 자동화 프레임워크(예: PyTest), LLM 평가 도구(예: OpenAI Evals, RAG 평가 도구, W&B) 실무 경험이 적합함을 보여줍니다. 돋보이는 기술로는 평가 기준 설계, 적대적 테스트/레드팀, 대규모 회귀 테스트, 편향/공정성 감사, 근거 검증, 프롬프트 및 시스템 프롬프트 엔지니어링, 테스트 자동화(Python/SQL), 신호가 높은 버그 보고 등이 있습니다. 명확하고 메타인지적인 커뮤니케이션—"작업 과정을 보여주는 것"—이 필수적입니다.
QA 전문성을 미래 AI의 품질 기반으로 전환할 준비가 되셨나요? 지금 지원하고 세상을 가르칠 모델을 가르치기 시작하세요.
시간당 $6에서 $65의 급여 범위를 제공하며, 정확한 요율은 귀하의 경험, 전문성, 지리적 위치를 평가한 후 결정됩니다. 최종 제안 금액은 위에 명시된 급여 범위와 다를 수 있습니다. 계약자로서 귀하는 안전한 컴퓨터와 고속 인터넷을 제공해야 하며, 건강 보험 및 유급 휴가와 같은 회사 지원 혜택은 적용되지 않습니다.
고용 유형: 계약직 근무 유형: 원격 직급: 중간-고급 레벨