Job Description

Du hast den Anspruch, dass KI nicht nur auf dem Papier, sondern im echten Einsatz brilliert? Dann werde unser F1-Optimierer für KI-Systeme! Bei uns bist Du die Qualitätsinstanz, die Modelle nicht nur versteht, sondern sie messbar besser macht und ihre Qualität gezielt steigern möchte – und so dafür sorgt, dass unsere Lösungen im Alltag wirklich halten, was sie versprechen. Unsere HM Argus Plattform ist bereits erfolgreich in der Mandatsarbeit im Einsatz, doch wir wollen mehr: mit Dir gehen wir den nächsten Schritt.
Deine AufgabenIm Mittelpunkt Deiner Rolle steht die kontinuierliche Analyse und Optimierung des F1-Scores unserer KI Systeme. Du erkennst typische Fehler von LLMs – etwa Halluzinationen, unvollständige Antworten oder falsche Schlussfolgerungen – und sorgst dafür, dass unsere Systeme verlässlich und reproduzierbar arbeiten. Du spielst mit Leichtigkeit mit der Precision und dem Recall unserer Systeme, um so die für das jeweilige Mandat optimale Balance zu erreichen. Die Qualität von Dokument-Ranking, Chunking-Strategien und Embeddings wird von Dir bewertet und gezielt verbessert. Auch der End-to-End-F1-Score unter Einbindung des RAGs und anderer Komponenten steht in Deinem Fokus, damit unsere Lösungen messbar besser werden. Du steuerst den Trade-off zwischen Vollständigkeit und Präzision und entwickelst Evaluations-Frameworks, die Transparenz in die Bewertung bringen. Im Alltag testest und optimierst Du Prompts für LLMs, analysierst User-Fragen und Modellantworten. Wenn ein LLM nicht wie gewünscht antwortet, identifizierst Du die Ursache – sei es im Retrieval, im Prompt oder im Modell – und erklärst dem Team die Zusammenhänge verständlich. Wer Spaß daran hat, sich über die Kernrolle hinaus einzubringen, findet bei uns vielfältige Möglichkeiten: von Prompt Engineering über Data Analytics bis hin zu explorativem Arbeiten in einem innovativen Umfeld.

Dein ProfilIdealerweise abgeschlossenes Studium in Informatik, Data Science, Computational Linguistics oder einem vergleichbaren Bereich. Fundiertes Verständnis von Machine Learning, NLP und modernen LLMs (z.B. GPT, Claude, Gemini, Mistral) sowie Erfahrung mit der Evaluation dieser Systeme anhand von Precision, Recall und F1-Score. Praktische Erfahrung mit Retrieval-, Search- und RAG-Architekturen: Du weißt, wie Embeddings, Vektorsuche und Dokumentenretrieval funktionieren und kannst die Qualität dieser Systeme systematisch messen und verbessern. Du bist vertraut mit erweiternden Technologien wie Agenten-Frameworks, Federated Learning, Fine-Tuning oder LoRA – und in der Lage, auch deren Performance und Zuverlässigkeit anhand klarer Metriken wie Precision, Recall und F1-Score zu bewerten. Routiniert im Umgang mit Evaluationsmethoden (z.B. Precision-Recall-Kurven, Confusion Matrices, Threshold-Optimierung) – auch bei komplexen, hybriden KI-Stacks. Fähigkeit, qualitative Ergebnisse aus LLM-, RAG- und erweiterten KI-Systemen in messbare, nachvollziehbare Kriterien zu übersetzen und verständlich zu kommunizieren. Sicher im Umgang mit Python für Datenanalyse, Modelltests und Auswertungen. Praktische Erfahrung mit Prompt-Design, Prompt-Iteration und typischen LLM-Herausforderungen wie Halluzinationen oder fehlenden Quellen. Hands-on, produktnah und iterativ: Du analysierst Daten selbst, erklärst komplexe Themen verständlich und hast Lust, in einem agilen Team Verantwortung zu übernehmen.

Wir bietenEin attraktives Vergütungspaket inkl. weiterer Benefits. Work-Life-Balance durch die Möglichkeit zum flexiblen Arbeiten. Gestaltungsspielraum mit sichtbarer Wirkung auf Kanzleiprozesse. Zielgerichtete Weiterbildungsmöglichkeiten im Rahmen unseres Programms Learning & Development. Eine abwechslungsreiche Tätigkeit in einem vielschichtigen Team mit flachen Hierarchien und hoher Transparenz. Ein spannendes, international geprägtes Arbeitsumfeld, in dem Du Deine Fachkenntnisse anwenden kannst. Ein modernes Büroumfeld mit verkehrsgünstiger City-Lage und hervorragender Anbindung an öffentliche Verkehrsmittel. Unsere wertschätzende, kollegiale und familienfreundliche Unternehmenskultur we@hengeler sowie ein strukturiertes Onboarding Programm.

Haben wir Dein Interesse geweckt?
Wir freuen uns über Deine vollständigen Bewerbungsunterlagen!
Deine Ansprechpartnerin für diese Position: Kyra Wein
Wir schätzen und fördern Vielfalt und freuen uns über Bewerbungen unabhängig von Geschlecht, kulturellem Hintergrund, ethnischer und sozialer Herkunft, Religion und Weltanschauung, sexueller Orientierung und Identität, Behinderung und Alter.

Hengeler Mueller zählt zu den renommiertesten international ausgerichteten Anwaltssozietäten. Mit unseren Büros in Berlin, Düsseldorf, Frankfurt am Main, München, Brüssel und London beraten wir Unternehmen aus dem In- und Ausland auf allen wesentlichen Gebieten des Wirtschaftsrechts. Dabei betreuen wir Mandate weltweit in enger Zusammenarbeit mit führenden Anwaltskanzleien in allen wichtigen Wirtschaftszentren.

Mehr

Wir freuen uns jederzeit an allen Standorten und in allen Fachbereichen über interessante Bewerbungen - auch gerne initiativ! Bitte nutzen Sie hierfür die Möglichkeit zur "Initiativbewerbung Business Services".

Mehr