직무 소개
작업 소개
Mercor는 최첨단 AI 모델을 레드팀(red-team) 방식으로 테스트하기 위해 폭발물 및 에너지 물질(energetic materials) 전문가 패널을 구성하고 있습니다. 목표는 모델이 기술적 요청의 오남용 가능성을 올바르게 판단할 수 있는지를 테스트하는 것입니다. 정당한 질문에는 충분히 답하고, 진정으로 위험한 질문은 거절해야 합니다.
수행 업무:
- 자신의 전문 분야에서 도전적인 단일 턴 프롬프트를 작성하고, 무해(benign), 이중 용도(dual-use), 적대적(adversarial)의 세 가지 수준으로 라벨을 지정합니다.
- 돌아온 응답을 정해진 정책 기준에 따라 평가하고, 각 응답이 올바르게 처리되었는지 판단합니다.
- 참조 답변을 작성합니다. 올바른 응답이 어떤 모습인지, 그리고 그 이유에 대한 기술적 근거를 포함합니다.
모델은 이 분야에서 양방향으로 실패하는 경향이 있습니다. 광산 엔지니어나 수사관이 매일 묻는 일상적인 질문은 거절하면서, 학술적인 외피를 쓰고 들어왔다는 이유로 차단했어야 할 요청에는 응하는 것입니다. 이를 구별하려면 실제로 그 일을 해 본 사람이 필요합니다.
찾고 있는 배경
두 가지 프로필의 인재를 모집하고 있으며 둘 다 필요합니다. 특수 물질 전문성을 갖춘 화학자, 그리고 기폭(initiation) 및 추진 시스템 경험이 있는 엔지니어 또는 운용자입니다. AI 평가 또는 레드팀 경험이 있으면 우대합니다. 관련 배경은 다음과 같습니다.
- 위험 장치 전문가 / 공공 안전 전문가 — 안전 처리(render-safe) 절차 및 장치 평가.
- 특수 물질 화학자(파이로테크닉 또는 추진) — 배합, 합성 및 성능 시험.
- 연방 인증 물질 전문가 / 사고 분석가 — 포렌식 식별 및 현장 분석.
- 추진 및 효과 엔지니어 — 탄약 및 추진 시스템 설계.
- 상업용 발파 엔지니어 — 특수 물질의 취급, 보관 및 운송.
기술적 깊이 외에 이 역할에 요구되는 것
이 업무는 글쓰기 비중이 큽니다. 내리는 모든 판단에는 비전문가도 따라올 수 있는 서면 근거가 필요합니다. 기술 문서 작성, 사고 또는 발파 후 보고서 작성, 연구 논문 발표 또는 전문가 증인 경험은 강력한 신호이므로 샘플이나 링크를 포함해 주십시오.
또한 자신의 분야에서 오남용 시나리오를 장시간 읽고 쓰게 됩니다. 이에 대해 전문가에게 사전에 안내하며, 언제든 불이익 없이 작업을 중단하거나 자리를 벗어날 수 있습니다.
지원 전 확인 사항
이 업무에는 기밀 정보나 수출 통제 대상 정보, 또는 NDA나 출판 전 검토 의무의 적용을 받는 어떤 정보도 포함되지 않으며, 이를 활용해서도 안 됩니다. 이러한 의무를 지고 계시더라도 적합한 후보일 수 있으니, 지원서에 알려 주시면 그에 맞게 업무 범위를 조정하겠습니다.