직무 소개
프로젝트 개요
당사는 고급 에이전틱 오디오 모델을 평가하는 AI 벤치마크 평가 프로젝트를 위해 독립적인 오디오 평가 전문가를 모집하고 있습니다. AI 모델이 이 분야에서 점점 더 복잡한 워크플로를 처리함에 따라—특히 항공 예약, 금융 서비스, 통신과 같은 실제 고객 지원 시나리오에서—그 정확성은 전적으로 견고하고 전문가가 제작한 학습 데이터에 달려 있습니다. 이 프로젝트의 목표는 시뮬레이션된 상호작용을 통해 고품질 평가 작업을 자율적으로 생성하고, 대화형 AI 출력을 감사하며, 모델 성능을 최적화하기 위한 깨끗하고 신뢰할 수 있는 데이터셋을 생성하는 것입니다.
프로젝트 산출물 및 범위
복잡한 평가 프레임워크를 설계하고 구조화된 학습 데이터를 제공하기 위해 자율적으로 운영됩니다. 예상 산출물은 다음과 같습니다:
- 역할극 시나리오 실행: 여행, 금융, 기술 지원 분야 전반에 걸쳐 실제 고객 서비스 상호작용을 시뮬레이션하는 복잡한 역할극 기반 평가 시나리오를 생성하고 실행합니다.
- 모델 성능 감사: 표준화된 정성적 및 정량적 지표 전반에 걸쳐 AI 모델 성능을 평가하며, 작업 완료 정확성, 대화의 자연스러움, 오디오 이해력에 엄격히 초점을 맞춥니다.
- 기술 지표 평가: JSON 구조, 함수, 메서드에 대한 이해와 지원 맥락 내에서 구조화된 데이터에 대해 추론하는 능력을 포함하여 모델의 기본적인 컴퓨터 프로그래밍 소양을 평가합니다.
- 대표 데이터셋 생성: 명확성, 효율성, 자연스러운 대화 흐름에 대한 실제 고객 기대를 정확히 반영하는 다양하고 고품질의 오디오 데이터셋 개발에 기여합니다.
필수 전문성
이 프로젝트의 산출물을 성공적으로 수행하려면 계약자는 현실적인 전문 시나리오를 구성할 수 있는 깊은 업계 지식을 갖추어야 합니다. 핵심 역량은 다음과 같습니다:
- 복잡한 고객 지원, 기술 문제 해결 또는 대화형 AI 평가 분야에서 입증 가능한 전문성.
- 대상 언어에 대한 원어민 또는 이중언어 수준의 능숙도(읽기, 듣기, 쓰기, 말하기 등 모든 언어 능력의 유창성 포함)와 함께, 시뮬레이션된 고객 지원 역할극을 자신 있게 수행할 수 있는 강력한 분석 및 언어 커뮤니케이션 능력.
- 기본적인 컴퓨터 프로그래밍 소양, 특히 JSON 구조, 함수, 메서드 및 간단한 논리에 대한 편안한 이해.
- 구조화된 프롬프트, 복잡한 평가 루브릭, 기술 지침을 다루는 데 있어 꼼꼼하고 세부 사항 지향적인 접근 방식.
- 필수 장비: 음성 평가 중 깨끗하고 신뢰할 수 있는 오디오 입력을 보장하기 위한 고품질 마이크 이용.
당사는 시간당 $6~$65의 급여 범위를 제공하며, 정확한 요율은 귀하의 경험, 전문성, 지리적 위치를 평가한 후 결정됩니다. 최종 제안 금액은 위에 명시된 급여 범위와 다를 수 있습니다. 계약자로서 귀하는 안전한 컴퓨터와 고속 인터넷을 제공해야 하며, 건강 보험 및 유급휴가와 같은 회사 후원 복리후생은 적용되지 않습니다.
고용 형태: 프리랜스 / 독립 계약자
근무 형태: 원격 근무
직급: 중간-고급