Over de functie
Kwaliteitsbeoordelaar – Engels
Help de toekomst van AI vormgeven door reacties van geavanceerde AI-modellen te evalueren en te vergelijken.
- Locatie: Op afstand
- Type: Zelfstandig contractor / Parttime
- Inzet: tot 3 maanden
- Vergoeding: $7-$12/uur
Over de functie
Bij Anyone AI creëren we hoogwaardige trainings- en evaluatiedata voor geavanceerde AI-modellen.
We zoeken experts die vloeiend Engels spreken, met sterke schrijfvaardigheden, kritisch denkvermogen en uitgebreide praktijkervaring met het gebruik van large language models (LLM's).
In deze functie ga je rechtstreeks met AI-modellen aan de slag en vergelijk je hun reacties naast elkaar om te bepalen welke het beste aansluit bij de behoeften van de gebruiker. Je evaluaties en schriftelijke toelichtingen helpen de nauwkeurigheid, behulpzaamheid en betrouwbaarheid van AI-systemen te verbeteren.
Wat je doet
- Met verschillende AI-modellen en tools werken bij een breed scala aan prompts en onderwerpen.
- Twee of meer door AI gegenereerde reacties naast elkaar vergelijken.
- Nauwkeurigheid, behulpzaamheid, het opvolgen van instructies, duidelijkheid en algehele kwaliteit van reacties beoordelen.
- Gedetailleerde beoordelingsrichtlijnen en meerstaps evaluatieworkflows volgen.
- Duidelijke, goed onderbouwde toelichtingen schrijven ter ondersteuning van je beoordelingsbeslissingen.
- Beoordelingscriteria consistent toepassen op alle taken.
Wat we zoeken
- Vloeiend Engels, met sterk leesbegrip en sterke schrijfvaardigheden.
- Uitgebreide praktijkervaring met het gebruik van LLM's en het kritisch beoordelen van hun output.
- Sterk analytisch beoordelingsvermogen en het vermogen om meerdere dimensies van reactiekwaliteit af te wegen.
- Uitstekend oog voor detail en het vermogen om complexe instructies zorgvuldig op te volgen.
- Het vermogen om beoordelingsbeslissingen duidelijk en overtuigend toe te lichten.
- Zich prettig voelen bij het afwisselen tussen AI-modellen, tools en meerstaps workflows.
Pluspunten
- Eerdere ervaring met AI-reactie-evaluatie, data-annotatie of kwaliteitsborging.
- Ervaring met redactie, onderzoek, fact-checking of analytisch schrijven.
- Bekendheid met beoordelingsrubrieken en side-by-side vergelijkingstaken.