직무 소개
작업 소개
Mercor는 최첨단 AI 모델을 레드팀(red-team) 방식으로 테스트하기 위해 화학 분야 전문가 패널을 구성하고 있습니다. 목표는 모델이 기술적 요청의 오남용 가능성을 올바르게 판단할 수 있는지, 즉 정당한 질문에는 충분히 답하면서 진정으로 위험한 질문은 거절하는지를 테스트하는 것입니다.
수행 업무:
- 자신의 전문 분야에서 도전적인 단일 턴 프롬프트를 작성하고, 무해(benign), 이중 용도(dual-use), 적대적(adversarial)의 세 가지 수준으로 라벨을 지정합니다.
- 돌아온 응답을 정해진 정책 기준에 따라 평가하고, 각 응답이 올바르게 처리되었는지 판단합니다.
- 참조 답변을 작성합니다. 올바른 응답이 어떤 모습인지, 그리고 그 이유에 대한 기술적 근거를 포함합니다.
어려운 부분은 난이도가 아니라 보정(calibration)입니다. 모델이 잘못 거절한 무해한 프롬프트는 잘못 답한 적대적 프롬프트만큼 가치가 있습니다. 이러한 판단 때문에 일반론자가 아닌 분야 전문가가 필요합니다. 화학에서는 그 경계가 메커니즘과 절차 사이에 놓여 있으며, 직접 반응을 수행해 본 사람만이 그 경계가 정확히 어디에 있는지 압니다. 찾고 있는 배경
합성, 분석 화학 또는 화학 안전 분야에서 실무 경험이 있는 전문가를 찾고 있습니다. AI 평가 또는 레드팀 경험이 있으면 우대합니다. 관련 배경은 다음과 같습니다.
- 화학 방어 연구원(USAMRICD, DoD, CDC) — 독성학적 작용제 및 의료 대응책.
- 합성 / 공정 화학자 — 경로 설계, 반응 공학 및 스케일업.
- 분석 화학자 — 위험 화합물의 탐지 및 식별 방법.
- 산업위생 전문가 / 공정 안전 엔지니어 — 노출 평가, 유독 물질 누출 및 공정 위험성 분석.
- 포렌식 / 독성 화학자 — 규제 물질, 전구체 식별 및 사건 업무(casework).
기술적 깊이 외에 이 역할에 요구되는 것
이 업무는 글쓰기 비중이 큽니다. 내리는 모든 판단에는 비전문가도 따라올 수 있는 서면 근거가 필요합니다. 기술 문서 작성, 연구 논문 발표 또는 전문가 증인 경험은 강력한 신호이므로 샘플이나 링크를 포함해 주십시오.
AI 레드팀 또는 모델 평가 경험은 우대 사항이지만 필수는 아닙니다.
또한 자신의 분야에서 오남용 시나리오를 장시간 읽고 쓰게 됩니다. 이에 대해 전문가에게 사전에 안내하며, 언제든 불이익 없이 작업을 중단하거나 자리를 벗어날 수 있습니다.
지원 전 확인 사항
이 업무에는 기밀 정보나 수출 통제 대상 정보, 또는 NDA나 출판 전 검토 의무의 적용을 받는 어떤 정보도 포함되지 않으며, 이를 활용해서도 안 됩니다. 이러한 의무를 지고 계시더라도 적합한 후보일 수 있으니, 지원서에 알려 주시면 그에 맞게 업무 범위를 조정하겠습니다.