Über die Stelle
In dieser stundenbasierten Remote-Auftragnehmerrolle arbeiten Sie als Bash Quality Assurance Lead (QAL) und überwachen Qualität, Konsistenz und die Leistung der Trainer in Bash-/Shell-Scripting-KI-Trainingsprojekten. Sie prüfen KI-generierten Bash-Code sowie die Arbeit von Trainern/QAs, bewerten die Ausgabequalität anhand der Projektrichtlinien, geben präzises schriftliches Feedback und stellen sicher, dass Mitwirkende die erwarteten Qualitätsstandards einhalten.
Sie bewerten Arbeiten hinsichtlich Skriptkorrektheit, Befehlssicherheit, Portabilität, Debugging-Genauigkeit, Fehlerbehandlung, Sicherheitsbewusstsein, Lesbarkeit, Wartbarkeit, Formatierung, Befolgung von Anweisungen und Einhaltung projektspezifischer Rubriken. Sie erkennen wiederkehrende Qualitätsprobleme, kommunizieren Updates an Trainer und QAs, unterstützen das Onboarding, pflegen die Dokumentation und helfen dabei, Mitwirkende zu aktivieren, die nicht konsistent arbeiten.
Diese Rolle ist bei SME Careers angesiedelt, einem schnell wachsenden Unternehmen für KI-Datendienste und Tochtergesellschaft von SuperAnnotate, das Trainingsdaten für viele der weltweit größten KI-Unternehmen und Foundation-Model-Labs bereitstellt. Ihre Bash-Qualitätsführung trägt direkt dazu bei, die weltweit führenden KI-Modelle zu verbessern, indem sie sicherstellt, dass Shell-Scripting-Trainingsdaten korrekt, ausführbar, sicher, klar erklärt und mit den Kundenerwartungen abgestimmt sind.
Der Auswahlprozess umfasst ein KI-Interview, eine domänenspezifische Aufgabe und ein Interview mit einem Recruiter.
Wichtig: Für diese Rolle gibt es aktuell kein unmittelbares Projekt; wenn Sie jedoch qualifiziert sind, gehören Sie zu den ersten Expertinnen und Experten, die wir kontaktieren, sobald sich relevante Möglichkeiten ergeben. Dies verschafft Ihnen außerdem Zugang zu zukünftigen Projekten, die über unser Expertennetzwerk verfügbar sind.
Was Sie tun werden
- Qualitätsüberwachung: Stichprobenartige Prüfung von Bash-Einträgen, Identifizierung von Qualitätsproblemen, Feedback über DMs und Eskalation wiederkehrender oder kritischer Probleme.
- Code-Review: Bewertung KI-generierter Shell-Skripte, CLI-Workflows, Automatisierungssnippets, Debugging-Antworten und Erklärungen hinsichtlich Korrektheit und Sicherheit.
- Kommunikation mit Trainern/QAs: Aktualisierung der Mitwirkenden auf Discord über neue Richtlinien, Workflow-Änderungen und Bash-spezifische Review-Erwartungen.
- Beantwortung von Fragen: Antworten auf Fragen zu Quoting, Portabilität, Linux-Befehlen, destruktiven Operationen, Berechtigungen, Pipelines und Rubrik-Interpretation.
- Aktivierungsmanagement: DMs an inaktive Mitwirkende, Ermutigung zur Aktivierung, Nachverfolgung von Follow-ups und Meldung von Verfügbarkeitsproblemen.
- Dokumentation: Erstellung und Pflege von Bash-Styleguides, Trackern, FAQs, Beispielen, Honeypots, Kalibrierungsaufgaben und Onboarding-Materialien.
- Onboarding: Durchführung von Onboarding-/Trainings-Calls, in denen Workflows, Rubriken, Sicherheitserwartungen und Bash-spezifische Review-Regeln erklärt werden.
- Sicherheitsprüfung: Kennzeichnung unsicherer Skripte, destruktiver Befehle, Offenlegung von Zugangsdaten, Injektionsrisiken oder irreführender Produktionsanleitungen.
- Prozessverbesserung: Identifizierung wiederkehrender Lücken und Aufbau skalierbarer QA-Prozesse.
Was wir suchen
- Bachelor- oder Masterabschluss in Informatik, Software Engineering, IT, Systemadministration oder gleichwertige Berufserfahrung.
- Gute Englischkenntnisse, um Richtlinien zu befolgen und klares technisches Feedback zu geben.
- 3+ Jahre Erfahrung mit Bash-/Shell-Scripting, Linux-/Unix-Systemen, Automatisierung, DevOps, Systemadministration, CI/CD oder Workflows im technischen Support.
- Fundiertes Verständnis der Bash-Grundlagen: Variablen, Quoting, Bedingungen, Schleifen, Funktionen, Pipes, Umleitung, Exit-Codes, Signale, Prozessverwaltung, Dateiberechtigungen und POSIX-Portabilität.
- Fähigkeit, Probleme wie unsichere Befehle, schlechtes Quoting, nicht portable Syntax, fehlende Fehlerbehandlung, falsche Annahmen, halluzinierte Flags und destruktive Operationen zu erkennen.
- Vertrautheit mit Tools wie grep, awk, sed, find, xargs, curl, jq, cron, SSH, Git, Docker, CI/CD-Pipelines und Linux-Paketmanagern ist von Vorteil.
- Erfahrung in der Leitung oder Unterstützung remote arbeitender Teams aus Trainern, Reviewern, Engineers oder QAs ist stark von Vorteil.
- Sicherer Umgang mit Discord, Google Sheets, Google Docs, Trackern, Dashboards, GitHub und PM-Systemen.
- Hohe Detailgenauigkeit und Organisation; Fähigkeit, Styleguides, FAQs, Tracker, Honeypots, Kalibrierungsaufgaben und Onboarding-Materialien zu pflegen.
- Erfahrung mit KI-Training, Datenannotation, LLM-Evaluierung, Code-QA oder rubrikbasierter Prüfung ist ein starkes Plus.