Über die Stelle
Über Turing:
Turing ist eines der weltweit am schnellsten wachsenden KI-Unternehmen und beschleunigt die Weiterentwicklung und den Einsatz leistungsstarker KI-Systeme.
Turing unterstützt Kunden auf zwei Arten: Zum einen arbeitet Turing mit den weltweit führenden KI-Labors zusammen, um die Fähigkeiten von Frontier-Modellen in den Bereichen Denken, logisches Schlussfolgern, Programmieren, agentisches Verhalten, Multimodalität, Mehrsprachigkeit, MINT und Frontier-Wissen voranzubringen; zum anderen nutzt Turing diese Arbeit, um reale KI-Systeme zu entwickeln, die geschäftskritische Prioritäten von Unternehmen lösen.
Über die Rolle
Wir entwickeln einen Evaluierungs-Benchmark für KI-Browsing-Agenten an der Spitze der Entwicklung (Frontier). Ihre Aufgabe ist es, Rechercheprobleme zu entwerfen, die eine hochmoderne KI selbst bei vollem Webzugriff und mehreren Versuchen nicht lösen kann. Dies ist weder eine Rolle für Fachexperten noch eine Rolle zur Erstellung von Inhalten. Es handelt sich um investigative Recherche.
Sie gehen von einem überprüfbaren Fakt aus, arbeiten rückwärts, um eine Frage zu konstruieren, die es extrem schwer macht, diesen Fakt aufzufinden, und belegen Ihre Arbeit anschließend mit einer vollständigen, prüfbaren Beweiskette.
Was Sie erstellen werden
- Eine Forschungsfrage in natürlicher Sprache mit einer kurzen, stabilen, objektiv überprüfbaren Antwort
- Hinweise, die jeweils unabhängig überprüfbar sind, mehrere Faktentypen abdecken – darunter Daten, Personen, Orte, Organisationen, Werke, Ereignisse, Aufzeichnungen und Mengenangaben – und spezifische Einschränkungen enthalten
- Ein Validierungsprotokoll, das die naheliegenden Suchen, die Sie durchgeführt haben, und die zurückgelieferten Ergebnisse dokumentiert
Mindestqualifikationen
- Master-Abschluss ODER >3 Jahre Berufserfahrung.
- Nachgewiesene Fähigkeit zur Open-Web-Recherche, einschließlich des Auffindens von Primärquellen und der Navigation in staatlichen und institutionellen Datenbanken, Archiven, Registern und PDF-Dokumenten
- Präzision bei der Quellenangabe. Sie zitieren genaue Seiten, Tabellen und Abschnitte – nicht nur Startseiten
- Sicherheit darin, sich unbekannte Themen von Grund auf zu erarbeiten
- Muttersprachliches oder nahezu muttersprachliches schriftliches Englisch
- Hohe Toleranz für strukturierte Dokumentation. Die Beweiskette macht den Großteil der Arbeit aus
- Erfahrung mit LLM-Evaluierung, Red-Teaming oder der Erstellung von Benchmarks
- Erfahrung in einem oder mehreren der folgenden Bereiche:
- Bibliothekarische Auskunft, Archivrecherche oder Spezialsammlungen
- Investigativjournalismus oder professionelles Faktenchecking
- OSINT, Due Diligence, KYC oder investigative Recherche
- Patent-, Stand-der-Technik- oder Legal-Discovery-Recherche
- Genealogie und Recherche in Aufzeichnungen
- Wettbewerbsquiz oder Erstellung von Rätseljagden (Puzzle Hunts)
Von Vorteil
- Vertrautheit mit JSON und strukturierten Datenlieferformaten
Projektüberblick
- Der aktuelle Task-Mix bietet ein geschätztes Verdienstpotenzial von etwa $30 pro genehmigter Aufgabe.
- Projekt über 8 Wochen
- Idealerweise bis zu 40 Stunden/Woche
- Vollständig remote | Bezahlung in USD
- Start, sobald Sie das Assessment erfolgreich bestanden haben
Wie geht es weiter? Reichen Sie Ihre Bewerbung ein und absolvieren Sie das erforderliche Assessment. Kandidaten, die das Assessment erfolgreich bestehen, können mit dem Onboarding fortfahren.