Over de functie
Kwaliteitsbeoordelaar – Engels
Help de toekomst van AI vormgeven door reacties van geavanceerde AI-modellen te beoordelen en te vergelijken.
- Locatie: Op afstand
- Type: Zelfstandige contractor / Parttime
- Inzet: tot 3 maanden
- Vergoeding: $7-$12/uur
Over de functie
Bij Anyone AI creëren we hoogwaardige trainings- en evaluatiedata voor geavanceerde AI-modellen.
We zoeken experts die vloeiend Engels spreken, met sterke schrijfvaardigheden, kritisch denkvermogen en uitgebreide praktijkervaring met het gebruik van grote taalmodellen (LLM's).
In deze functie werk je rechtstreeks met AI-modellen en vergelijk je hun reacties zij aan zij om te bepalen welke het beste aan de behoeften van de gebruiker voldoet. Je beoordelingen en schriftelijke toelichtingen helpen de nauwkeurigheid, bruikbaarheid en betrouwbaarheid van AI-systemen te verbeteren.
Wat je doet
- Interacteren met verschillende AI-modellen en -tools over een breed scala aan prompts en onderwerpen.
- Twee of meer door AI gegenereerde reacties zij aan zij vergelijken.
- Nauwkeurigheid, bruikbaarheid, het volgen van instructies, duidelijkheid en algehele kwaliteit van de reactie beoordelen.
- Gedetailleerde beoordelingsrichtlijnen en meerstaps evaluatieworkflows volgen.
- Duidelijke, goed onderbouwde toelichtingen schrijven die je beoordelingsbeslissingen ondersteunen.
- Beoordelingscriteria consistent toepassen op alle taken.
Wat we zoeken
- Vloeiend Engels, met sterke leesvaardigheid en schrijfvaardigheid.
- Uitgebreide praktijkervaring met het gebruik van LLM's en het kritisch beoordelen van hun output.
- Sterk analytisch beoordelingsvermogen en het vermogen om meerdere dimensies van reactiekwaliteit af te wegen.
- Uitstekend oog voor detail en het vermogen om complexe instructies zorgvuldig te volgen.
- Het vermogen om beoordelingsbeslissingen duidelijk en overtuigend toe te lichten.
- Zich comfortabel kunnen afwisselen tussen AI-modellen, tools en meerstaps workflows.
Prettig om te hebben
- Eerdere ervaring met het beoordelen van AI-reacties, data-annotatie of kwaliteitsborging.
- Ervaring met redigeren, onderzoek, fact-checking of analytisch schrijven.
- Bekendheid met beoordelingsrubrics en zij-aan-zij vergelijkingstaken.