직무 소개
최첨단 AI 연구소의 모델을 학습시키고 평가하는 데 사용되는 소프트웨어 엔지니어링 벤치마크 작업의 품질, 정확성 및 재현성을 평가합니다. 저장소 수준의 작업, 참조 패치, 테스트 하네스, 채점의 무결성을 평가하고, 명확한 루브릭 기반의 서면 피드백을 제공하게 됩니다.
기본 자격 요건
- 전문 소프트웨어 엔지니어링 경력 3년 이상
- 실제 오픈 소스 기여 또는 메인테이너 경험(병합된 PR, 커미터/메인테이너 역할)
- 참조 패치, 테스트 러너, Docker 격리를 감사하고 정답 유출/리워드 해킹을 탐지할 수 있는 뛰어난 능력
- 일반적인 생태계 전반에 대한 능숙함(Python 및 Java / Go / TypeScript / C++ 중 최소 하나)
우대 사항
- SWE-Bench(Verified) 또는 유사한 저장소 벤치마크에 대한 이해
- 주요 Python 오픈 소스(Django, Flask, scikit-learn, sympy, pytest 등)의 메인테이너 이력
- 코드 리뷰 또는 작업 채점 경력