Over de functie
Mercor zoekt ervaren bevoegde advocaten om rubrieken en ground-truth-antwoorden te auditen voor een dataset voor juridisch onderzoek die wordt gebruikt om geavanceerde AI-systemen te evalueren. Je beoordeelt bestaande juridische onderzoeksvragen, verifieert de juistheid van modelantwoorden en verfijnt beoordelingsrubrieken zodat de dataset het actuele recht en degelijke juridische redenering weerspiegelt. Dit is een kortdurende, volledig op afstand uitgevoerde opdracht.
- * *
Verantwoordelijkheden
- Beoordeel beoordelingsrubrieken op juistheid, volledigheid, consistentie en duidelijkheid.
- Verifieer ground-truth-antwoorden aan de hand van toepasselijke wetgeving, regelgeving en jurisprudentie.
- Identificeer juridische fouten, verouderde rechtsbronnen, ontbrekende kwesties en dubbelzinnige beoordelingscriteria.
- Herschrijf of corrigeer ground-truth-antwoorden en rubriconderdelen waar nodig.
- Geef beknopte, gestructureerde schriftelijke feedback op elk beoordeeld item.
- * *
Rechtsgebieden
De dataset bestrijkt acht rechtsgebieden. Ervaring in een of meer is vereist, en breedte over meerdere is een pluspunt:
- Bestuursrecht / Regelgeving
- Ondernemings- en handelsrecht
- Burgerlijke rechtsvordering
- Staatsrecht / Burgerrechten
- Strafrecht
- Familierecht
- Gezondheidsrecht
- Immigratierecht
- * *
Vereiste kwalificaties
- Juris Doctor (JD) en actieve toelating tot de balie van de Verenigde Staten in goede staat.
- 5+ jaar juridische praktijkervaring.
- Substantiële ervaring in ten minste een van de bovenstaande rechtsgebieden.
- Sterke vaardigheden in juridisch onderzoek, analyse en schrijven.
- Grote aandacht voor detail en het vermogen om consistent te oordelen.
- * *
Gewenste kwalificaties
- Ervaring in meerdere van de genoemde rechtsgebieden.
- Ervaring als gerechtelijk klerk, in hoger beroep, bij de overheid of met juridisch onderzoek bij een advocatenkantoor.
- Eerdere ervaring met het beoordelen of becijferen van juridisch werkproduct, of met evaluatieprojecten op het gebied van AI / legal tech.
- * *
Waarom deelnemen?
- Zet je juridische expertise in om vorm te geven aan hoe AI-systemen worden geëvalueerd voor juridisch onderzoek.
- Werk samen met een toonaangevende AI-onderzoeksorganisatie.