직무 소개
회사 소개 캘리포니아 샌프란시스코에 본사를 둔 Turing은 프런티어 AI 연구소를 위한 세계 최고의 연구 가속기이자 고급 AI 시스템을 도입하는 글로벌 기업의 신뢰할 수 있는 파트너입니다. Turing은 두 가지 방식으로 고객을 지원합니다. 첫째, 소프트웨어 엔지니어링, 논리적 추론, STEM, 다국어, 멀티모달리티, 에이전트를 전문으로 하는 최고 AI 연구원들과 함께 고품질 데이터, 고급 훈련 파이프라인으로 프런티어 연구를 가속합니다. 둘째, 그 전문성을 적용하여 기업이 AI를 개념 증명에서 독자적 인텔리전스로 전환하도록 지원하며, 안정적으로 작동하고 측정 가능한 영향을 제공하며 P&L에 지속적인 결과를 가져오는 시스템을 구축합니다.
프로젝트 개요 우리는 고수준 연구원과 기술 전문가를 찾고 있습니다. 이 역할의 핵심 목표는 도전적인 벤치마크 작업을 설계, 검증, 분석하여 대상 프런티어 모델의 추론 및 문제 해결 능력을 향상시키는 것입니다.
역할 내용:
- 작업 설계 및 개발: 모델의 기반이 되는 도전적이고 실제적인 문제를 설계합니다. 문제는 선도 모델에서 식별된 특정 핵심 역량 손실 실패를 겨냥하도록 구성해야 합니다.
- 콘텐츠 생성: 문제를 에이전트 개발 환경에 통합하고 Python을 사용하여 필요한 모든 구성 요소를 준비합니다. 여기에는 다음이 포함됩니다:
- 상세 지침 및 필요한 작업 개요.
- 지침을 따르는 골든 솔루션.
- 데이터셋, Python 라이브러리, 메타데이터를 포함한 필요한 환경.
- 솔루션이 통과해야 하는 단위 테스트가 포함된 테스트 노트북.
- 평가 및 분석: 작업에 대한 교차 모델의 성능을 평가합니다.
- 헤드룸 식별: 대상 모델이 모든 테스트를 통과하지 못하는 작업을 식별하고, 특히 실패를 논리적 추론 실패로 분류합니다.
- 손실 추출: 에이전트의 단계(에이전트 궤적)를 분석하여 모델에서 핵심 역량 손실 패턴을 관찰하고 추출합니다.
필수 기술
- 고도로 숙련된 GitHub 기여자.
- 지원자는 데이터 과학, ML, 코딩 또는 프런티어 STEM 분야의 깊은 정량적 배경 중 하나에 강한 전문성을 갖추어야 합니다.
- 주당 30시간 이상(평일) 안정적으로 참여할 수 있어야 합니다.
평가 프로세스
- 지원 프로세스는 약 15분 소요됩니다.
- AI 비디오 인터뷰 완료가 필요합니다.