Acerca del puesto
En este rol de contratista remoto por horas, trabajarás como Líder de Aseguramiento de Calidad en Psicología (QAL) para supervisar la calidad, la consistencia y el desempeño de los entrenadores en proyectos de entrenamiento de IA centrados en psicología. Revisarás contenido de psicología generado por IA y el trabajo de entrenadores/QA, evaluarás la calidad de los resultados según las directrices del proyecto, proporcionarás retroalimentación escrita precisa y garantizarás que todos los colaboradores sigan los estándares de calidad esperados.
Evaluarás el trabajo en cuanto a precisión psicológica, aplicación de teorías, alfabetización investigativa, conciencia ética, seguridad en salud mental, cautela diagnóstica, claridad, formato, seguimiento de instrucciones y adherencia a rúbricas específicas del proyecto. Identificarás problemas de calidad recurrentes, comunicarás actualizaciones a entrenadores y QAs, apoyarás la incorporación, mantenerás la documentación y ayudarás a activar a los colaboradores que no están trabajando de manera constante. Este rol requiere sólida experiencia en psicología, fuertes habilidades de comunicación en inglés, excelente atención al detalle, comunicación estructurada y la capacidad de gestionar flujos de trabajo de calidad en equipos de expertos remotos.
Este rol es con SME Careers, una empresa de Servicios de Datos de IA en rápido crecimiento y subsidiaria de SuperAnnotate, que proporciona datos de entrenamiento para muchas de las empresas de IA y laboratorios de modelos fundacionales más grandes del mundo. Tu liderazgo en calidad de psicología ayudará directamente a mejorar los principales modelos de IA del mundo al garantizar que los datos de entrenamiento de psicología sean precisos, éticos, adecuadamente cautelosos, basados en investigación y alineados con las expectativas del cliente.
El proceso de selección incluye una entrevista con IA, una tarea específica del dominio y una entrevista con un reclutador.
Importante: No hay un proyecto inmediato para este rol; sin embargo, si estás calificado, estarás entre los primeros expertos a quienes contactaremos cuando surjan oportunidades relevantes. Esto también te brindará acceso a futuros proyectos disponibles a través de nuestra red de expertos.
Lo que harás
- Monitoreo de calidad: Revisar por muestreo elementos de psicología, identificar problemas de calidad, proporcionar retroalimentación continua mediante mensajes directos y escalar problemas recurrentes o críticos.
- Revisión de psicología: Evaluar explicaciones de psicología generadas por IA, contenido de salud mental, resúmenes de investigación, orientación conductual, aplicaciones de teorías y respuestas sensibles a la seguridad en cuanto a precisión e idoneidad.
- Comunicación con entrenadores y QA: Actualizar a entrenadores y QAs en Discord sobre nuevas directrices de elementos, cambios en el proyecto, actualizaciones de flujos de trabajo, expectativas de calidad y estándares de revisión específicos de psicología.
- Gestión de preguntas: Responder a las preguntas de entrenadores/QA de manera clara y oportuna, especialmente en torno a conceptos psicológicos, calidad de la evidencia, límites éticos, seguridad en salud mental, cautela diagnóstica e interpretación de rúbricas.
- Gestión de activación de entrenadores/QA: Enviar mensajes directos a colaboradores inactivos o que no están trabajando, fomentar la activación, hacer seguimiento y señalar problemas de disponibilidad cuando sea necesario.
- Documentación: Crear y mantener documentación de proyectos de psicología, incluidos guías de estilo, rastreadores, preguntas frecuentes, notas de calidad, ejemplos, honeypots, tareas de calibración y materiales de incorporación.
- Incorporación y entrenamiento: Programar y realizar llamadas de incorporación/entrenamiento con entrenadores y QAs para explicar las expectativas del proyecto, flujos de trabajo, rúbricas, estándares de calidad y requisitos de revisión específicos de psicología.
- Alineación de calidad: Garantizar que todos los entrenadores y QAs apliquen las directrices de revisión de psicología de manera consistente y comprendan las actualizaciones a medida que los proyectos evolucionan.
- Revisión de seguridad y ética: Señalar contenido de psicología inseguro, demasiado confiado, estigmatizante, pseudocientífico, diagnósticamente inapropiado o insensible a crisis.
- Mejora de procesos: Identificar brechas de calidad recurrentes, proponer mejoras en los flujos de trabajo y ayudar a construir procesos de QA escalables para proyectos de entrenamiento de IA en psicología.
Lo que buscamos
- Licenciatura, Maestría, PhD, PsyD o formación profesional equivalente en Psicología, Psicología Clínica, Consejería, Ciencias del Comportamiento, Ciencia Cognitiva, Neurociencia, Trabajo Social, investigación afín a Psiquiatría, Educación o un campo estrechamente relacionado.
- Sólido dominio del idioma inglés para seguir las directrices del proyecto, comunicarse con los equipos y proporcionar retroalimentación escrita clara.
- 3+ años de experiencia en investigación en psicología, entornos clínicos/de consejería, ciencias del comportamiento, docencia, escritura académica, revisión de contenido de salud mental, evaluación psicológica o flujos de trabajo relacionados.
- Sólido entendimiento de teorías psicológicas, métodos de investigación, psicología cognitiva y social, psicología del desarrollo, psicología anormal, ética, práctica basada en evidencia y consideraciones de seguridad en salud mental.
- Capacidad para evaluar contenido de psicología según rúbricas detalladas e identificar problemas como sobrediagnóstico, consejos inseguros, afirmaciones no respaldadas, interpretación defectuosa de estudios, pseudociencia, lenguaje estigmatizante o recomendaciones terapéuticas inapropiadas.
- Se prefiere familiaridad con áreas como TCC, psicología del desarrollo, personalidad, comunicación informada por trauma, intervenciones conductuales, alfabetización en salud mental, diseño de investigación, estadística y directrices éticas.
- Se prefiere fuertemente experiencia liderando o apoyando equipos remotos de investigadores, clínicos, educadores, revisores, anotadores o QAs.
- Cómodo trabajando en entornos remotos de ritmo rápido utilizando herramientas como Discord, Google Sheets, Google Docs, rastreadores, paneles de control y sistemas de gestión de proyectos.
- Altamente orientado al detalle y organizado, con la capacidad de mantener guías de estilo, preguntas frecuentes, rastreadores, materiales de incorporación, tareas de calibración y documentación.
- Experiencia con entrenamiento de IA, anotación de datos, evaluación de LLM, QA en psicología, revisión de contenido de salud mental o revisión basada en rúbricas es una gran ventaja.