Stellenbeschreibung
Über den Job
Mercor verbindet Elite-Talente aus Kreativ- und Technikbereichen mit führenden KI-Forschungslaboren. Mit Hauptsitz in San Francisco gehören zu unseren Investoren Benchmark, General Catalyst, Peter Thiel, Adam D'Angelo, Larry Summers und Jack Dorsey.
Position:
AI Model Evaluation Contractor
Details:
- Art: Vertrag
- Vergütung: 25--35 $/Stunde
- Verpflichtung: 20 Stunden/Woche
Aufgabenbeschreibung
- Verfassen realistischer Prompts, die fachspezifische Anleitungen für Fachleute und Verbraucher widerspiegeln.
- Bewerten von KI-generierten Antworten auf sachliche Richtigkeit, regulatorische Konformität und praktische Nutzbarkeit.
- Identifizieren von erfundenen Behauptungen, falschen Referenzen oder irreführenden Schlussfolgerungen in Modellantworten.
- Bewerten und Rangieren mehrerer Modellantworten anhand strukturierter Bewertungsmaßstäbe über verschiedene Dimensionen hinweg.
- Bereitstellen schriftlicher Begründungen mit spezifischen Beweisen für jede Bewertung.
Qualifikationen
Muss-Kriterien
- Berufserfahrung in der Anwendung von Fachwissen in der Praxis oder als Berater.
- Vertrautheit mit branchenspezifischen Standards, Vorschriften oder klinischen Leitlinien.
- Starke schriftliche Kommunikations- und kritische Denkfähigkeiten.
Bewerbungsprozess (Dauer: 20--30 Minuten)
- Reichen Sie Ihren Lebenslauf ein, um zu beginnen.
- Schließen Sie die Bewertung der Modellantworten ab.
Ressourcen & Support
- Details zum Interviewprozess und zur Plattform finden Sie unter: https://talent.docs.mercor.com/welcome/welcome
- Bei Fragen oder Unterstützung wenden Sie sich bitte an: support@mercor.com
PS: Unser Team prüft täglich Bewerbungen. Bitte schließen Sie Ihre KI-Interview- und Bewerbungsschritte ab, um für diese Stelle berücksichtigt zu werden.
