Experten für Softwareentwicklung, Datenwissenschaft und Systemdesign, Kotlin (mindestens 5 Jahre Berufserfahrung)

Standort: In den USA und außerhalb der USA

Art der Beschäftigung: Vollzeit- oder Teilzeit-Beauftragung

Erforderliche Sprachkenntnisse: Englisch Warum diese Stelle ausgeschrieben ist: In Zusammenarbeit mit führenden KI-Teams soll die Qualität, Nützlichkeit und Zuverlässigkeit von universellen dialogorientierten KI-Systemen verbessert werden. Diese Systeme kommen in einer Vielzahl von Alltags- und Berufssituationen zum Einsatz, und ihre Wirksamkeit hängt davon ab, wie klar, präzise und hilfreich sie auf echte Nutzerfragen reagieren. Im Kontext von Programmierung und Softwareentwicklung müssen dialogorientierte KI-Systeme korrektes logisches Denken, ausgeprägte Problemlösungsfähigkeiten und die Einhaltung bewährter Verfahren aus der Praxis unter Beweis stellen. Dieses Projekt konzentriert sich darauf, zu bewerten und zu verbessern, wie Modelle Code analysieren, Lösungen generieren und technische Konzepte bei einer Vielzahl von Programmieraufgaben und Komplexitätsstufen erklären. Ihre Aufgaben

• Bewertung von LLM-generierten Antworten auf Fragen zur Programmierung und Softwareentwicklung hinsichtlich Genauigkeit, Argumentation, Klarheit und Vollständigkeit
• Durchführung von Faktenprüfungen unter Verwendung vertrauenswürdiger öffentlicher Quellen und maßgeblicher Referenzen
• Durchführung von Genauigkeitstests durch Ausführung von Code und Validierung der Ergebnisse mit geeigneten Tools
• Modellantworten kommentieren, indem Sie Stärken, Verbesserungsmöglichkeiten sowie sachliche oder konzeptionelle Ungenauigkeiten identifizieren
• Codequalität, Lesbarkeit, algorithmische Korrektheit und Erklärungsqualität bewerten
• Sicherstellen, dass **Modus