Evaluator van gepersonaliseerde AI-antwoorden (Nederlands)

Je gaat evalueren hoe goed een AI-systeem persoonlijke context gebruikt in gesprekken die uit meerdere beurten bestaan. Je creëert prompts op basis van je eigen ervaringen, beoordeelt antwoorden, vergelijkt alternatieven en legt je oordelen duidelijk uit.

Je feedback zal zich richten op de vraag of personalisatie nuttig, natuurlijk en accuraat is, en of deze wordt ondersteund door de beschikbare informatie. Je beoordeelt ook debuggegevens om te controleren of gesprekssamenvattingen en relevante gegevensbronnen correct zijn gebruikt.

• Opstellen en uitvoeren van multi-turn prompts waarbij de AI relevante persoonlijke context moet gebruiken.
• Identificeer ongefundeerde beweringen, hallucinaties, onjuiste personalisatie, zwakke gevolgtrekkingen, geforceerde verbanden en onnatuurlijk breedsprakige antwoorden.
• Vergelijk antwoorden zij aan zij en rangschik ze op behulpzaamheid, gebruiksgemak en algehele kwaliteit.
• Schrijf duidelijke onderbouwingen die verwijzen naar specifieke gespreksbeurten en leg de sterke punten en problemen uit.
• Geef gedetailleerde annotaties en constructieve feedback.

Wat we bieden en vragen

Dit is een contractopdracht op afstand voor één maand. Het project ondersteunt een wereldwijd operationeel team, maar er is niet vermeld welke specifieke landen in aanmerking komen.

• Vergoeding: $20 per uur.
• Werktijden: Minimaal 4 uur per dag, tot 40 uur per week.
• Vaste inzet: 20 of meer uur per week.
• Tijdzone: 4 uur overlap met Pacific Time.
• Taal: Sterke lees- en schrijfvaardigheid in het Nederlands is essentieel.
• Niveau: Startersfunctie, waarbij een sterk analytisch beoordelingsvermogen vereist is.
• Opleiding: Een bachelordiploma of vergelijkbare ervaring in beleid, rechten, ethiek, taalkunde, journalistiek, informatica of een gerelateerd analytisch vakgebied wordt gevraagd.
• Mooi meegenomen: Ervaring met data-annotatie, AI-kwaliteitsevaluatie, contentmoderatie of gerelateerd werk.
• Apparatuur: Een desktop of laptop en een betrouwbare internetverbinding.
• Werkstijl: Je moet zelfstandig kunnen werken en genuanceerde of dubbelzinnige AI-antwoorden kunnen evalueren.

Hoe het werkt

Solliciteer op OpenTrain met je cv en voltooi daarna de sollicitatie op de website van de werkgever.

Over AI-trainingswerk

AI-trainingswerk is de menselijke inzet achter systemen die leren van voorbeelden, waaronder het evalueren en scoren van antwoorden van het model. Mensen met een scherp beoordelingsvermogen worden betaald om fouten te identificeren, de kwaliteit te vergelijken en eraan bij te dragen dat het gedrag van AI nuttiger en betrouwbaarder wordt.