Acerca del puesto
En este rol de contratista remoto por horas, trabajarás como Líder de Garantía de Calidad Médica (QAL) para supervisar la calidad, la consistencia y el desempeño de los entrenadores en proyectos de entrenamiento de IA médica. Revisarás contenido médico generado por IA y el trabajo de entrenadores/QA, evaluarás la calidad de los resultados según las pautas del proyecto, proporcionarás retroalimentación escrita precisa y asegurarás que todos los colaboradores sigan los estándares de calidad esperados.
Evaluarás el trabajo en cuanto a precisión médica, calidad del razonamiento clínico, conocimiento de las pautas, conciencia de seguridad del paciente, corrección de terminología, claridad, sensibilidad al riesgo, formato, seguimiento de instrucciones y adherencia a las rúbricas específicas del proyecto. Detectarás problemas de calidad recurrentes, comunicarás actualizaciones a entrenadores y QAs, apoyarás la incorporación, mantenerás documentación y ayudarás a activar a colaboradores que no están trabajando de manera consistente. Este rol requiere sólida experiencia médica, fuertes habilidades de comunicación en inglés, excelente atención al detalle, comunicación estructurada y la capacidad de gestionar flujos de trabajo de calidad en equipos remotos de revisión médica.
Este rol es con SME Careers, una empresa de servicios de datos de IA en rápido crecimiento y subsidiaria de SuperAnnotate, que proporciona datos de entrenamiento para muchas de las empresas de IA y laboratorios de modelos fundacionales más grandes del mundo. Tu liderazgo en calidad médica ayudará directamente a mejorar los principales modelos de IA del mundo al asegurar que los datos de entrenamiento médico sean precisos, clínicamente sólidos, claramente explicados, adecuadamente cautelosos, conscientes de la seguridad, bien documentados y alineados con las expectativas del cliente.
El proceso de selección incluye una entrevista con IA, una tarea específica del dominio y una entrevista con un reclutador.
Importante: No hay un proyecto inmediato para este rol; sin embargo, si estás calificado, estarás entre los primeros expertos a quienes contactaremos cuando surjan oportunidades relevantes. Esto también te brindará acceso a proyectos futuros disponibles a través de nuestra red de expertos.
Lo que harás
- Monitoreo de calidad: Realizar verificaciones puntuales de elementos médicos, identificar problemas de calidad, proporcionar retroalimentación continua a través de mensajes directos y escalar problemas recurrentes o críticos.
- Revisión médica: Evaluar explicaciones médicas generadas por IA, razonamiento clínico, respuestas dirigidas a pacientes, análisis de casos, discusiones diagnósticas, resúmenes de tratamiento, contenido relacionado con medicamentos y materiales de educación para la salud en cuanto a precisión, claridad y cautela apropiada.
- Comunicación con entrenadores y QA: Actualizar a entrenadores y QAs en Discord sobre nuevas pautas de elementos, cambios en el proyecto, actualizaciones de flujo de trabajo, expectativas de calidad y estándares específicos de revisión médica.
- Gestión de preguntas: Responder a preguntas de entrenadores/QA de manera clara y oportuna, especialmente sobre razonamiento clínico, terminología, riesgos de seguridad del paciente, afirmaciones médicas, interpretación de pautas, calidad de la evidencia y aplicación de rúbricas.
- Gestión de activación de entrenadores/QA: Enviar mensajes directos a colaboradores inactivos o que no están trabajando, fomentar la activación, realizar seguimiento y señalar problemas de disponibilidad cuando sea necesario.
- Documentación: Crear y mantener documentación de proyectos médicos, incluidos guías de estilo, rastreadores, preguntas frecuentes, notas de calidad, ejemplos, honeypots, tareas de calibración y materiales de incorporación.
- Incorporación y entrenamiento: Programar y realizar llamadas de incorporación/entrenamiento con entrenadores y QAs para explicar las expectativas del proyecto, flujos de trabajo, rúbricas, estándares de calidad y requisitos de revisión específicos de medicina.
- Alineación de calidad: Asegurar que todos los entrenadores y QAs apliquen las pautas de revisión médica de manera consistente y comprendan las actualizaciones a medida que evolucionan los proyectos.
- Revisión de riesgos y seguridad: Señalar resultados médicos inseguros, engañosos, demasiado confiados o clínicamente inapropiados, especialmente cuando el contenido podría interpretarse como diagnóstico personalizado, tratamiento, orientación de emergencia, instrucciones sobre medicamentos o consejo médico profesional.
- Mejora de procesos: Identificar brechas de calidad recurrentes, proponer mejoras en el flujo de trabajo y ayudar a construir procesos de QA escalables para proyectos de entrenamiento de IA médica.
Lo que buscamos
- Título médico como MD, DO, MBBS, MBChB o equivalente; títulos avanzados en clínica, biomedicina, enfermería, farmacia o áreas relacionadas con la salud pueden considerarse según los requisitos del proyecto.
- Fuerte dominio del idioma inglés para seguir las pautas del proyecto, comunicarse con los equipos y proporcionar retroalimentación clara de revisión médica en inglés.
- 3+ años de experiencia profesional en medicina, práctica clínica, investigación médica, educación médica, documentación clínica, QA de atención médica, redacción médica, revisión de pautas o flujos de trabajo relacionados.
- Sólido entendimiento de temas médicos fundamentales como razonamiento clínico, diagnóstico diferencial, fisiopatología, farmacología, diagnóstico, principios de tratamiento, seguridad del paciente, medicina basada en evidencia, terminología médica y comunicación en atención médica.
- Capacidad para evaluar contenido médico según rúbricas detalladas e identificar problemas como recomendaciones inseguras, hechos alucinados, advertencias faltantes, razonamiento clínico incorrecto, afirmaciones demasiado confiadas sobre diagnóstico/tratamiento, consejos inapropiados para pacientes o explicaciones incompletas.
- Se prefiere familiaridad con flujos de trabajo o referencias médicas como pautas clínicas, vías diagnósticas, seguridad de medicamentos, revisión de historias clínicas, resúmenes de casos, materiales de educación para pacientes, literatura médica y revisión basada en evidencia.
- Se prefiere fuertemente experiencia liderando o apoyando equipos remotos de entrenadores, anotadores, revisores, clínicos, redactores médicos, investigadores, educadores o QAs.
- Cómodo trabajando en entornos remotos de ritmo rápido utilizando herramientas como Discord, Google Sheets, Google Docs, rastreadores, paneles de control y sistemas de gestión de proyectos.
- Altamente orientado al detalle y organizado, con la capacidad de mantener guías de estilo, preguntas frecuentes, rastreadores, materiales de incorporación, honeypots, tareas de calibración y otra documentación de calidad.
- Experiencia con entrenamiento de IA, anotación de datos, modelos de lenguaje grandes, evaluación de prompts/respuestas, QA de contenido médico o evaluación de LLM basada en rúbricas es una gran ventaja.