Będziesz oceniać, jak dobrze system AI wykorzystuje kontekst osobisty, aby odpowiedzi były bardziej trafne i pomocne. Będziesz tworzyć realistyczne, wieloturowe rozmowy, sprawdzać odpowiedzi modelu, porównywać wyniki i pisać ustrukturyzowaną informację zwrotną na potrzeby projektu trenowania AI.
Praca obejmuje sprawdzanie, czy personalizacja opiera się na dostępnych informacjach, identyfikowanie nieuzasadnionych wniosków lub halucynacji oraz ocenianie, czy informacje osobiste są wykorzystywane w naturalny sposób, a nie niezręcznie objaśniane.
- Tworzenie i uruchamianie wieloetapowych promptów opartych na osobistych doświadczeniach i kontekście.
- Sprawdzanie, czy odpowiedzi wykorzystują osobiste informacje w sposób odpowiedni i dokładny.
- Identyfikowanie niepopartych faktami wniosków, halucynacji, wymuszonych powiązań i innych problemów z personalizacją.
- Porównuj i oceniaj dwie odpowiedzi modelu pod kątem przydatności, łatwości użycia, przyjemności korzystania oraz ogólnej jakości.
- Pisz jasne uzasadnienia, które odnoszą się do konkretnych wypowiedzi w rozmowie.
- Przeglądanie informacji o debugowaniu i wykorzystaniu źródeł danych, a następnie usuwanie ocenianych konwersacji w celu utrzymania porządku w historii czatu.
Wynagrodzenie i wymagania
Jest to zdalna współpraca na część etatu w ramach kontraktu trwającego jeden miesiąc. Rola skupia się na ewaluacji w języku polskim i jest otwarta dla zdalnych wykonawców tam, gdzie jest to dozwolone.
- Wynagrodzenie: $20 za godzinę.
- Dostępność: Co najmniej 4 godziny dziennie, 20 lub więcej godzin w tygodniu i maksymalnie do 40 godzin w tygodniu.
- Harmonogram: Obejmuje 4 godziny pokrywające się ze strefą czasową Pacific Time.
- Język: Umiejętność czytania i pisania w języku polskim na poziomie profesjonalnym.
- Poziom doświadczenia: poziom początkujący.
- Potrzebujesz silnych umiejętności analitycznych, zdolności do kreatywnego pisania promptów, jasnej komunikacji pisemnej oraz dużej dbałości o szczegóły.
- Pomocny będzie tytuł licencjata lub równoważne doświadczenie w dziedzinie polityki publicznej, prawa, etyki, lingwistyki, dziennikarstwa, informatyki lub pokrewnej dziedzinie analitycznej.
- Preferowane jest doświadczenie w adnotacji danych, ocenie jakości AI, moderacji treści lub na pokrewnym stanowisku.
- Potrzebujesz niezawodnego sprzętu komputerowego i dostępu do internetu.
- Musisz wyrazić chęć korzystania z głównego, osobistego konta Google oraz odpowiednich osobistych źródeł danych do celów ewaluacji.
Jak to działa
Aplikuj przez OpenTrain, przesyłając swoje CV, a następnie dokończ składanie wniosku na stronie rekrutacyjnej.
O pracy przy trenowaniu AI
Trenowanie AI to praca ludzi stojąca za systemami, które rozumieją i generują tekst. Współtwórcy piszą przykłady, porównują odpowiedzi modeli i wyjaśniają, które z nich są dokładne, przydatne i naturalne, aby systemy AI mogły się doskonalić.