Over de functie
Kwaliteitsbeoordelaar – Engels
Help de toekomst van AI vormgeven door reacties van geavanceerde AI-modellen te evalueren en te vergelijken.
- Locatie: Op afstand
- Type: Zelfstandig contractor / Parttime
- Inzet: tot 3 maanden
- Vergoeding: $7-$12/uur
Over de rol
Bij Anyone AI creëren we hoogwaardige trainings- en evaluatiedata voor geavanceerde AI-modellen.
We zoeken experts die vloeiend Engels spreken, met sterke schrijfvaardigheden, kritisch denkvermogen en uitgebreide praktijkervaring met het gebruik van large language models (LLM's).
In deze rol werk je rechtstreeks met AI-modellen en vergelijk je hun reacties zij aan zij om te bepalen welke het beste aansluit bij de behoeften van de gebruiker. Je beoordelingen en schriftelijke toelichtingen helpen de nauwkeurigheid, bruikbaarheid en betrouwbaarheid van AI-systemen te verbeteren.
Wat je doet
- Werken met verschillende AI-modellen en tools voor een breed scala aan prompts en onderwerpen.
- Twee of meer door AI gegenereerde reacties zij aan zij vergelijken.
- Nauwkeurigheid, bruikbaarheid, opvolging van instructies, duidelijkheid en algehele kwaliteit van reacties beoordelen.
- Gedetailleerde beoordelingsrichtlijnen en meerstaps evaluatieworkflows volgen.
- Duidelijke, goed onderbouwde toelichtingen schrijven ter ondersteuning van je beoordelingsbeslissingen.
- Evaluatiecriteria consistent toepassen across taken.
Wat we zoeken
- Vloeiendheid in Engels, met sterk leesbegrip en sterke schrijfvaardigheden.
- Uitgebreide praktijkervaring met het gebruik van LLM's en het kritisch beoordelen van hun output.
- Sterk analytisch oordeelsvermogen en het vermogen om meerdere dimensies van reactiekwaliteit af te wegen.
- Uitstekend oog voor detail en het vermogen om complexe instructies zorgvuldig te volgen.
- Het vermogen om beoordelingsbeslissingen duidelijk en overtuigend toe te lichten.
- Zich prettig voelen bij het wisselen tussen AI-modellen, tools en meerstaps workflows.
Prettig om te hebben
- Eerdere ervaring met het evalueren van AI-reacties, data-annotatie of kwaliteitsborging.
- Ervaring met redactie, onderzoek, factchecking of analytisch schrijven.
- Bekendheid met beoordelingsrubrics en zij-aan-zij vergelijkingstaken.