Vereinigte Staaten
B&A
Linda Werner & Associates
Content Specialist III | KI-Bewertung & Prompting
Vereinigte Staaten
United States
Automatische Übersetzung. Prüfe das Original.
Über die Stelle
Wir suchen einen erfahrenen Content Specialist III, der uns bei der Bewertung, Verfeinerung und Verbesserung fortschrittlicher KI-Modelle und -Produkte unterstützt.
In dieser Rolle arbeiten Sie direkt mit sich entwickelnden KI-Systemen zusammen, testen deren Reaktionen auf eine breite Palette von Themen und Konversationstypen, identifizieren deren Erfolge oder Schwächen und helfen bei der Gestaltung der Prompts, Qualitätsstandards und Bewertungsrahmen, die beeinflussen, wie sie kommunizieren und sich verhalten.
Dies ist eine sehr praxisorientierte Gelegenheit für jemanden, der starke Schreib- und Content-Expertise, Neugier auf KI, fundiertes Urteilsvermögen und ein scharfes Auge für Qualität mitbringt. Ihre Arbeit wird direkt zur Verbesserung realer KI-Produkterlebnisse und zur Leistung dieser Systeme für Benutzer beitragen.
Was Sie tun werden
- Testen neuer KI-Modellversionen für eine Vielzahl von Themen, Anwendungsfällen und Konversationstypen
- Bewerten von Modellantworten anhand etablierter Bewertungsmaßstäbe, Richtlinien und Qualitätsstandards
- Identifizieren und Dokumentieren spezifischer Beispiele für erfolgreiches und erfolgloses Modellverhalten
- Schreiben und Verfeinern von System-Prompts, die zur Gestaltung von Modellpersönlichkeit, Ton und Verhalten beitragen
- Beurteilen, ob Bewertungsmaßstäbe und Qualitätsstandards die Modellleistung effektiv messen
- Durchführen von Qualitätsprüfungen von menschlichen und agentenbasierten Bewertungen, um Genauigkeit und Compliance sicherzustellen
- Durchführen von praktischen Experimenten mit KI-Modellen und -Produkten
- Untersuchen von Modellfehlern und klares Dokumentieren der Ergebnisse
- Konsequentes Anwenden detaillierter Anweisungen und Bewertungskriterien auf ein hohes Arbeitsvolumen
- Schnelles Anpassen an sich ändernde Produktprioritäten, Modellverhalten und Bewertungsanforderungen
Top-Fähigkeiten
- KI-Modellbewertung
- Prompt-Erstellung und -Verfeinerung
- Schreiben und Redigieren
- Bewertungsmaßstabsbasierte Qualitätsbewertung
- Faktenprüfung und analytisches Urteilsvermögen
Qualifikationen
- 5+ Jahre Erfahrung in den Bereichen Schreiben, Redigieren, Journalismus, Produktion, Linguistik, MINT, Programmierung, Politik oder einem anderen relevanten Fachgebiet
- Bachelor-Abschluss oder gleichwertige Erfahrung
- Tiefgreifende Expertise in mindestens einem Fachgebiet mit der Fähigkeit, Inhalte als Fachexperte zu bewerten
- Starkes Urteilsvermögen und Liebe zum Detail mit der Fähigkeit, detaillierte Bewertungsmaßstäbe konsequent anzuwenden, Informationen zu überprüfen und Qualitätsprobleme zu identifizieren
Bevorzugte Erfahrung
- 1+ Jahr praktische KI-Erfahrung bevorzugt, einschließlich Prompting, Annotation, Bewertung oder Red Teaming
- Erfahrung in der Bewertung von generativen KI- oder Large Language Model-Ausgaben
- Starke Fähigkeiten zur Faktenprüfung und Recherche
- Fähigkeit, Behauptungen anhand von Originalquellen zu überprüfen
- Erfahrung mit detaillierten Fehleruntersuchungen
- Klare schriftliche Kommunikations- und Dokumentationsfähigkeiten
- Fähigkeit, Fragen und Blockaden frühzeitig zu melden
- Komfort beim Ändern von Prioritäten, wenn sich die Produktanforderungen ändern
Zeitplan
Dieses Team arbeitet in einem sich schnell entwickelnden Umfeld, in dem sich Prioritäten von Tag zu Tag ändern können. Erfolgreiche Kandidaten sind in der Lage, Qualität, Geschwindigkeit, Volumen und unabhängiges Urteilsvermögen auszubalancieren und gleichzeitig detaillierte Anweisungen zu befolgen.
Sie sollten Freude daran haben, sich mit Details zu beschäftigen, subtile Unterschiede in KI-Antworten zu erkennen, zu bestimmen, warum etwas funktioniert oder fehlschlägt, und diese Beobachtungen in klares und umsetzbares Feedback zu übersetzen.
Standort: Vereinigte Staaten (Remote)
Art der Stelle: Befristete 6-monatige Position
Erwartete Arbeitsstunden: 40 pro Woche
- 8-Stunden-Schicht
- Montag bis Freitag
Bewerbungsfrage(n)
Benötigen Sie oder werden Sie in Zukunft eine Sponsoring für die Arbeit in den USA benötigen?
Sprache
Englisch (Erforderlich)
Leistungen
- Zahnversicherung
- Krankenversicherung
- Gesundheitssparkonto
- Lebensversicherung
- Bezahlter Urlaub
- Altersvorsorgeplan
- Sehversicherung
Mehr Möglichkeiten mit einem Profil
Für mehr Stellen berücksichtigt werden, ohne den ganzen Prozess zu wiederholen? Erstellen Sie Ihr Profil, damit Unternehmen auf Nort Sie finden.
Profil erstellen