Bunge
Anyone AI
Quality Evaluator – Fließend Englisch (Brasilien)
Über die Stelle
Quality Evaluator – Englisch
Gestalten Sie die Zukunft der KI mit, indem Sie Antworten fortschrittlicher KI-Modelle bewerten und vergleichen.
Über die Rolle
Bei Anyone AI erstellen wir hochwertige Trainings- und Bewertungsdaten für führende KI-Modelle.
Wir suchen Experten mit fließenden Englischkenntnissen, ausgeprägten Schreibfähigkeiten, kritischem Denkvermögen und umfassender praktischer Erfahrung im Umgang mit Large Language Models (LLMs).
In dieser Rolle interagieren Sie direkt mit KI-Modellen und vergleichen deren Antworten im direkten Vergleich, um zu bestimmen, welche am besten die Anforderungen des Nutzers erfüllt. Ihre Bewertungen und schriftlichen Erläuterungen tragen dazu bei, die Genauigkeit, Hilfsbereitschaft und Zuverlässigkeit von KI-Systemen zu verbessern.
Standort: Remote
Art der Beschäftigung: Freiberuflich / Teilzeit
Laufzeit: bis zu 3 Monaten
Vergütung: $7-$12/Stunde
Ihre Aufgaben
- Interaktion mit verschiedenen KI-Modellen und Tools zu einer Vielzahl von Prompts und Themen.
- Vergleich von zwei oder mehr KI-generierten Antworten im direkten Gegenüber.
- Bewertung von Genauigkeit, Hilfsbereitschaft, Befolgung von Anweisungen, Klarheit und allgemeiner Antwortqualität.
- Einhaltung detaillierter Bewertungsrichtlinien und mehrstufiger Evaluierungs-Workflows.
- Verfassen klarer, fundierter Erläuterungen zur Begründung Ihrer Bewertungsentscheidungen.
- Konsistente Anwendung der Bewertungskriterien über verschiedene Aufgaben hinweg.
Mindestanforderungen
Was wir suchen
- Fließende Englischkenntnisse sowie ausgeprägtes Leseverständnis und gute schriftliche Ausdrucksfähigkeit.
- Umfassende praktische Erfahrung im Umgang mit LLMs und der kritischen Beurteilung ihrer Ergebnisse.
- Starkes analytisches Urteilsvermögen und die Fähigkeit, verschiedene Dimensionen der Antwortqualität abzuwägen.
- Exzellente Detailgenauigkeit und die Fähigkeit, komplexe Anweisungen sorgfältig zu befolgen.
- Fähigkeit, Bewertungsentscheidungen klar und überzeugend zu begründen.
- Sicherer Umgang mit dem Wechsel zwischen verschiedenen KI-Modellen, Tools und mehrstufigen Workflows.
Wünschenswert
- Vorerfahrung in der Bewertung von KI-Antworten, Datenannotation oder Qualitätssicherung.
- Erfahrung in den Bereichen Lektorat, Recherche, Faktencheck oder analytisches Schreiben.
- Vertrautheit mit Bewertungsrubriken und Aufgaben zum direkten Vergleich (Side-by-Side).
