직무 소개
Turing 소개:
Turing은 강력한 AI 시스템의 발전과 배포를 가속하는, 세계에서 가장 빠르게 성장하는 AI 기업 중 하나입니다.
Turing은 두 가지 방식으로 고객을 지원합니다. 하나는 세계 선도적인 AI 연구소와 협력하여 사고, 추론, 코딩, 에이전트 행동, 멀티모달리티, 다국어, STEM, 최첨단 지식 분야의 최첨단 모델 역량을 발전시키는 것이고, 다른 하나는 그 성과를 활용하여 기업의 핵심 과제를 해결하는 실제 AI 시스템을 구축하는 것입니다.
직무 개요:
이 포지션은 파운데이션 LLM 기업 중 한 곳과 진행하는 프로젝트에 속해 있습니다. 목표는 이러한 파운데이션 LLM 기업이 자사의 대규모 언어 모델을 향상시키도록 지원하는 것입니다.
당사가 이들 기업의 모델 개선을 돕는 방법 중 하나는 고품질의 독점 데이터를 제공하는 것입니다. 이 데이터는 두 가지 주요 목적으로 쓰입니다. 첫째, 모델 파인튜닝의 기반으로, 둘째, 자사 모델 또는 경쟁사 모델의 성능을 벤치마킹하는 평가 세트로 사용됩니다.
예를 들어 SFT 데이터 생성의 경우, 제공된 코드와 질문이 포함된 프롬프트를 직접 구성하거나 제공받게 되며, 이후 모델 응답을 제공하고 해당 질문을 해결하는 Python 코드를 작성하게 됩니다.
RLHF 데이터 생성의 경우, 프롬프트를 직접 작성하거나 고객이 제공한 프롬프트를 사용하여 모델에 질문하고, 두 가지 버전의 LLM이 생성한 출력을 평가해야 할 수 있습니다. 이러한 출력을 비교하여 피드백을 제공하면, 이 피드백이 모델 파인튜닝에 사용됩니다. 이 직무에는 LLM을 구축하거나 파인튜닝하는 일이 포함되지 않는다는 점에 유의하시기 바랍니다.
일상 업무는 다음과 같습니다:
- AI 모델을 학습시키고 최적화하기 위한 효율적이고 품질 높은 Python 코드를 설계, 개발 및 유지 관리합니다.
- 모델 성능을 벤치마킹하기 위한 평가(Evals)를 수행하고, 지속적인 개선을 위해 결과를 분석합니다.
- Python 프레임워크와 라이브러리에 대한 이해
- 다양한 도메인에 걸친 사용자 질의에 대한 AI 모델의 응답을 평가하고 순위를 매겨, 사전에 정의된 기준에 부합하도록 합니다.
- 뛰어난 추론 능력과 기술 전문성을 보여주는 평가에 대한 포괄적인 설명과 근거를 작성합니다.
- 고품질의 과업별 데이터셋을 만들고 유지하는 것을 포함하여 지도 파인튜닝(SFT) 활동을 주도합니다.
- 연구자 및 어노테이터와 협업하여 인간 피드백 기반 강화 학습(RLHF)을 수행하고 보상 모델을 개선합니다.
- 모델이 사용자 요구와 윤리 지침에 더 잘 부합하도록 개선하는 혁신적인 평가 전략과 프로세스를 설계합니다.
- 명확성, 관련성, 기술적 정확성을 중시하며 AI 성능을 향상시키는 최적의 응답을 작성하고 다듬습니다.
- 코드와 문서에 대해 철저한 동료 리뷰를 수행하여 건설적인 피드백을 제공하고 개선할 부분을 찾아냅니다.
- 유관 부서와 협업하여 모델 성능을 향상시키고 제품 개선에 기여합니다.
- AI 학습 프로세스를 개선하기 위해 새로운 도구, 기법, 방법론을 지속적으로 탐색하고 도입합니다.
요구 사항:
- Python 프로그래밍 언어에 대한 풍부한 경험 3년 이상.
- 코드 품질, 포맷팅, 소프트웨어 개발 모범 사례에 대한 업계 경험과 지식
- 단위 테스트, 통합 테스트, 속성 기반 테스트를 포함한 Python 테스트 생태계 경험.
- Python의 멀티스레딩 및 비동기 프로그래밍에 대한 지식.
- 아키텍처 패턴을 다루고, 회귀(regression)를 일으키지 않고 코드를 리팩터링할 수 있는 능력.
- 메모리 및 동시성 문제 해결을 포함한 뛰어난 디버깅 능력.
- 구어와 문어 영어 의사소통에 유창함
Turing에서 프리랜서로 일할 때의 혜택:
- 전면 원격 환경에서 근무합니다.
- 선도적인 LLM 기업과 함께 최첨단 AI 프로젝트에 참여할 기회.
제안 조건:
- 필수 투입 조건: 하루 최소 4시간, 주당 최소 20시간 근무하며 PST와 4시간 겹침. (투입 시간은 3가지 옵션이 있습니다: 주당 20시간, 주당 30시간 또는 주당 40시간)
- 계약 형태: 계약자 배정(의료 혜택 및 유급 휴가 없음)
- 계약 기간: 1개월; [예상 시작일은 다음 주]
평가 절차(약 75분):
- 두 차례의 면접(60분 기술 면접 + 15분 컬처핏 및 오퍼 논의)