Over de functie
Kwaliteitsbeoordelaar – Engels
Help de toekomst van AI vormgeven door reacties van geavanceerde AI-modellen te beoordelen en te vergelijken.
- Locatie: Op afstand
- Type: Onafhankelijke contractor / Parttime
- Inzet: tot 3 maanden
- Vergoeding: $7-$12/uur
Over de functie
Bij Anyone AI maken we hoogwaardige trainings- en evaluatiedata voor geavanceerde AI-modellen.
We zoeken experts die vloeiend Engels spreken, met sterke schrijfvaardigheden, kritisch denkvermogen en uitgebreide praktijkervaring met het gebruik van large language models (LLM's).
In deze functie werk je rechtstreeks met AI-modellen en vergelijk je hun reacties naast elkaar om te bepalen welke het beste aansluit bij de behoeften van de gebruiker. Je beoordelingen en schriftelijke toelichtingen helpen de nauwkeurigheid, bruikbaarheid en betrouwbaarheid van AI-systemen te verbeteren.
Wat je gaat doen
- Werken met verschillende AI-modellen en tools voor een breed scala aan prompts en onderwerpen.
- Twee of meer door AI gegenereerde reacties naast elkaar vergelijken.
- Nauwkeurigheid, bruikbaarheid, naleving van instructies, duidelijkheid en algehele kwaliteit van reacties beoordelen.
- Gedetailleerde beoordelingsrichtlijnen en meerstaps evaluatieworkflows volgen.
- Duidelijke, goed onderbouwde toelichtingen schrijven ter ondersteuning van je beoordelingsbeslissingen.
- Beoordelingscriteria consistent toepassen across taken.
Wat we zoeken
- Vloeiend Engels, met sterk leesbegrip en sterke schrijfvaardigheden.
- Uitgebreide praktijkervaring met het gebruik van LLM's en het kritisch beoordelen van hun output.
- Sterk analytisch beoordelingsvermogen en het vermogen om meerdere dimensies van reactiekwaliteit af te wegen.
- Uitstekend oog voor detail en het vermogen om complexe instructies zorgvuldig te volgen.
- Het vermogen om beoordelingsbeslissingen duidelijk en overtuigend toe te lichten.
- Zich prettig voelen bij het wisselen tussen AI-modellen, tools en meerstaps workflows.
Pre
- Eerdere ervaring met het beoordelen van AI-reacties, data-annotatie of kwaliteitsborging.
- Ervaring met redigeren, onderzoek, factchecking of analytisch schrijven.
- Bekendheid met beoordelingsrubrics en side-by-side vergelijkingstaken.