Moderne Tracing-Werkzeuge wie MLFlow bieten eine Vielzahl von Metriken, um die Datenflüsse und Verarbeitungsschritte innerhalb eines KI-Agentensystems, das auf Transformern basiert, darzustellen. Je nach Komplexität des Systems fallen zusätzliche Metriken an, die als Ergänzung dienen, um das Systemverhalten insgesamt darzustellen. Hier setzt deine Abschlussarbeit an: Du unterstützt uns bei der Entwicklung von Best-Practice-Ansätzen, um das Systemverhalten auf Basis effektiver Auswertungen und Systemoptimierungen anhand von Nutzerfeedback zu verbessern. Du analysierst State-of-the-Art-Tracing-Werkzeuge und -Methoden, leitest fundierte Handlungsempfehlungen ab und untermauerst diese mit Best-Practice-Beispielen. Zur Bewertung von Traces nutzt du Metriken, die automatisch generiert werden (z. B. heuristische Metriken oder LLM-as-a-Judge) und optional durch Nutzerfeedback ergänzt werden. Ein zentraler Aspekt ist dabei die systematische Verknüpfung dieser verschiedenen Datenquellen und Bewertungsmethoden.
Fiona Laube, Specialist Recruiting & HR Marketing
jobs@mm-software.com
Tel.: +49 7724 9415-36
Bewirb dich gerne per du und nutze unsere Vornamen! Sende deine Bewerbungsunterlagen mit deinem gewünschten Eintrittstermin.
𝐌&𝐌 𝐒𝐨𝐟𝐭𝐰𝐚𝐫𝐞 𝐢𝐬 𝐚𝐧 𝐢𝐧𝐭𝐞𝐫𝐧𝐚𝐭𝐢𝐨𝐧𝐚𝐥 𝐬𝐨𝐟𝐭𝐰𝐚𝐫𝐞 𝐚𝐧𝐝 𝐝𝐢𝐠𝐢𝐭𝐚𝐥𝐢𝐳𝐚𝐭𝐢𝐨𝐧 𝐩𝐚𝐫𝐭𝐧𝐞𝐫.
We accompany companies in the digital transformation of their organizations, products and business models. We identify potential, generate ideas, derive strategies and develop tailor-made software solutions for the digital world. The results of our trusting and cooperative collaboration are digital products or systems that are successful on the market and that we accompany throughout their entire life cycle. We consult and implement at eye level and in close coordination with our customers. In this way, we create new business opportunities and secure competitive advantages. Our global teams work closely with partners in research, academia, and industry
𝐖𝐞 𝐭𝐮𝐫𝐧 𝐯𝐢𝐬𝐢𝐨𝐧𝐬 𝐟𝐨𝐫 𝐚 𝐝𝐢𝐠𝐢𝐭𝐚𝐥 𝐰𝐨𝐫𝐥𝐝 𝐢𝐧𝐭𝐨 𝐫𝐞𝐚𝐥𝐢𝐭𝐲.
M&M Software offers more than 35 years of experience and state-of-the-art technical know-how. Our nearly 300 highly motivated employees at four locations worldwide are a key factor in the success of our projects. Together we drive the digital future.
