Bewertungsfachkraft für KI-Personalisierung (Deutsch) (m/w/d)

Sie bewerten, wie ein konversationsbasiertes KI-Modell Informationen aus früheren Unterhaltungen und verknüpften Aktivitäten nutzt, um seine Antworten relevanter und hilfreicher zu gestalten. Die Arbeit kombiniert deutschsprachige Überprüfung, das Verfassen von Prompts, sorgfältige Vergleiche und evidenzbasierte Beurteilungen.

Sie überprüfen außerdem unterstützende Informationen, verfassen detaillierte Annotationen und entfernen Evaluierungskonversationen nach der Überprüfung, um eine gute Datenhygiene aufrechtzuerhalten.

• Erstellen und Ausführen von Multi-Turn-Prompts, die in der Regel ein bis fünf Turns umfassen, unter Verwendung persönlicher Erfahrungen und Kontexte.
• Überprüfen, ob die Modellantworten persönliche Informationen angemessen verwenden, und unbegründete Behauptungen, fehlerhafte Schlussfolgerungen, Halluzinationen oder erzwungene Zusammenhänge identifizieren.
• Faktenbasierung, Integration, Nützlichkeit, Benutzerfreundlichkeit, Unterhaltungswert, Natürlichkeit und ausschweifende Erklärungen bewerten.
• Zwei Modellantworten direkt nebeneinander vergleichen und Ihre Entscheidung anhand bestimmter Gesprächsbeiträge begründen.
• Ergänzende Informationen herausarbeiten und überprüfen, um zu bestätigen, dass Zusammenfassungen und relevante Datenquellen korrekt verwendet wurden.
• Bereitstellen von konstruktivem Feedback und detaillierten Annotationen.
• Löschen von Evaluierungskonversationen nach der Überprüfung.

Vergütung und Anforderungen

Dies ist eine Remote-Tätigkeit in Teilzeit als freie Mitarbeit, die voraussichtlich drei Monate dauern wird. Personen weltweit können sich bewerben.

• 15 $ pro Stunde.
• Mindestens 20 Stunden pro Woche, mit einer Verfügbarkeit von mindestens vier Stunden pro Tag und bis zu 40 Stunden pro Woche.
• Vier Stunden Überschneidung der Arbeitszeit mit der Pacific Time sind erforderlich.
• Fließende Deutschkenntnisse im Lesen und Schreiben.
• Mittleres Erfahrungsniveau mit starkem analytischen Urteilsvermögen für nuancierte oder unklare KI-Antworten.
• Erfahrung in der Erstellung kreativer Prompts, die das Modellverhalten unter Verwendung von persönlichem Kontext testen.
• Fähigkeit, fehlerhafte Personalisierung, unbelegte Schlussfolgerungen und unnatürliche Verwendung persönlicher Daten zu erkennen.
• Klarer, prägnanter und strukturierter Schreibstil mit präziser, evidenzbasierter Argumentation.
• Bereitschaft, ein persönliches Hauptkonto zu verwenden und relevante persönliche Datenquellen für die Bewertung zu aktivieren.
• Ein Desktop-PC oder Laptop, eine zuverlässige Internetverbindung und die Fähigkeit, eigenständig zu arbeiten.
• Ein Abschluss oder gleichwertige Erfahrung in den Bereichen Politik, Recht, Ethik, Linguistik, Journalismus, Informatik oder einem verwandten analytischen Bereich ist von Vorteil.
• Erfahrung in der Datenannotation, der Bewertung der KI-Qualität, der Inhaltsmoderation oder ähnlichen Überprüfungsaufgaben ist von Vorteil.

So funktioniert es

Sie bewerben sich über OpenTrain mit Ihrem Lebenslauf und schließen die Bewerbung anschließend auf der Website des einstellenden Unternehmens ab.

Über KI-Training

KI-Training ist die menschliche Arbeit hinter Systemen, die aus Beispielen lernen. Dazu gehören das Verfassen von Prompts, das Überprüfen von Modellantworten und das Bewerten, ob Antworten korrekt und nützlich sind. Personen mit ausgeprägten Sprachkenntnissen und sorgfältigem Urteilsvermögen tragen dazu bei, die Antworten dieser Systeme zu gestalten.