직무 소개
Turing 소개: 캘리포니아주 샌프란시스코에 본사를 둔 Turing은 프런티어 AI 연구소를 위한 세계 최고의 연구 가속기이자, 첨단 AI 시스템을 도입하는 글로벌 기업의 신뢰받는 파트너입니다. Turing은 두 가지 방식으로 고객을 지원합니다. 첫째, 고품질 데이터, 고도화된 학습 파이프라인, 그리고 코딩, 추론, STEM, 다국어 능력, 멀티모달리티, 에이전트를 전문으로 하는 최고 수준의 AI 연구자를 통해 프런티어 연구를 가속화합니다. 둘째, 그 전문성을 적용하여 기업이 AI를 개념 증명 단계에서 독자적인 인텔리전스로 전환하도록 지원하며, 안정적으로 작동하고 측정 가능한 성과를 내며 손익계산서(P&L)에서 지속적인 결과를 이끌어 내는 시스템을 제공합니다.
역할 소개
고급 대규모 언어 모델(LLM)의 평가, 테스트, 개선을 지원할 우수한 도메인 전문가(SME)를 찾고 있습니다. 주제 전문성을 활용하여 AI가 생성한 응답을 평가하고, 지식 공백을 식별하며, 도전적인 프롬프트를 설계하고, 모델의 정확성, 신뢰성, 추론 능력을 개선하게 됩니다.
주요 업무
- LLM의 역량을 테스트하기 위한 복잡한 도메인 특화 프롬프트를 작성합니다.
- AI가 생성한 응답의 사실적 정확성, 추론, 관련성, 전반적인 품질을 평가합니다.
- 사실 오류, 논리적 불일치, 지식 공백, 모델의 약점을 식별합니다.
- 모델의 한계를 드러내는 도전적인 테스트 케이스와 엣지 케이스를 개발합니다.
- 모델 성능을 개선하기 위해 명확하고 상세하며 근거에 기반한 피드백을 제공합니다.
최소 자격 요건
- 관련 분야의 석사 학위 이상.
- 실무, 연구 또는 강의 경력 최소 3년.
- 뛰어난 영어 글쓰기 의사소통 능력.
- 뛰어난 분석 및 비판적 사고 능력.
- 탁월한 세부 사항 주의력.
우대 자격 요건
- LLM 또는 생성형 AI를 다룬 경험.
- 프롬프트 엔지니어링, AI 평가 또는 모델 테스트에 대한 이해.
- 도전적인 프롬프트를 설계하거나, 엣지 케이스를 식별하거나, AI 모델에 스트레스 테스트를 수행한 경험.
이상적인 지원자
이상적인 지원자는 호기심이 많고, 꼼꼼하며, 자신의 분야에 대해 깊은 지식을 갖추고 있습니다. 복잡한 문제를 해결하고, 가정에 의문을 제기하며, 미묘한 사실 또는 추론 오류를 찾아내는 일을 즐깁니다. 모델의 한계를 드러내고 AI 성능을 개선하는 프롬프트를 설계한 경험은 큰 강점이 됩니다.