Match score not available

AI Model Performance Analyst

unlimited holidays
Remote: 
Full Remote
Contract: 
Experience: 
Junior (1-2 years)
Work from: 

Offer summary

Qualifications:

1+ years in data analysis, Familiarity with statistical methods, Experience with data analysis tools (Python, SQL, Tableau), Knowledge of machine learning and NLP preferred, Excellent communication skills in German and English.

Key responsabilities:

  • Monitor and analyze LLM performance using statistical methods
  • Identify trends and insights from customer data
  • Collaborate with teams to translate needs into data-driven strategies
  • Develop dashboards for key performance metrics
  • Ensure effective communication with clients and internal teams
Hypatos logo
Hypatos Scaleup https://www.hypatos.ai/
51 - 200 Employees
See more Hypatos offers

Job description

Deine Aufgaben
Wir suchen einen Data Analyst, der für die Verwaltung und Optimierung der Leistung eines großen Sprachmodells (LLM) verantwortlich ist. Sie werden sich darauf konzentrieren, die Intelligent Document Processing (IDP) und Straight-Through Processing (STP) Systeme zu verstehen und zu optimieren, um unseren Kunden den größtmöglichen Nutzen zu bieten. Diese Position umfasst die Analyse großer Datensätze, die von unseren fortschrittlichen maschinellen Lernmodellen und automatisierten Dokumentenverarbeitungslösungen generiert werden, um Trends aufzudecken, Verbesserungsmöglichkeiten zu identifizieren und strategische Entscheidungen zu unterstützen. Als Teil unseres dynamischen Teams haben Sie die Möglichkeit, Ihre analytischen Fähigkeiten weiterzuentwickeln und direkt zur Weiterentwicklung unserer KI-Lösungen beizutragen. Sie werden eng mit verschiedenen Abteilungen zusammenarbeiten und uns dabei unterstützen, unsere Produkte effizienter und kundenorientierter zu gestalten.

Mission:  
  • Überwachung und Analyse der Leistung des LLM unter Verwendung verschiedener statistischer Methoden und Datenanalysetools 
  • Analyse von Kundendaten, um umsetzbare Erkenntnisse zur Verbesserung der IDP- und STP-Systeme zu liefern 
  • Zusammenarbeit mit den CSM- und PS-Teams, um die Kundenbedürfnisse zu verstehen und in datengesteuerte Strategien zu übersetzen 
  • Entwicklung und Pflege von Dashboards und Berichten zur Überwachung von Schlüsselkennzahlen (KPIs) und Erfolgsmetriken der Kunden 
  • Durchführung eingehender Analysen, um Trends, Muster und Anomalien in Kundendaten zu identifizieren 
  • Empfehlungen zur Prozess- und Systemverbesserung auf Grundlage der Datenanalyse zur Verbesserung der Kundenerfahrung und operativen Effizienz sowie direkte Kommunikation dieser Empfehlungen an den Kunden 
  • Unterstützung bei der Entwicklung und Umsetzung datengesteuerter Strategien zur Steigerung der Kundenzufriedenheit und -bindung 
  • Enge Zusammenarbeit mit den Validierungsteams, um Feedback zu sammeln und die Modellqualität sicherzustellen 
  • Pflege von Kundenbeziehungen und Gewährleistung der Kundenzufriedenheit durch effektive Kommunikation und Erwartungsmanagement 
  • Sicherstellung einer reibungslosen Kommunikation zwischen internen Teams und Kunden zur Erreichung der Projektziele und Optimierung des Modell-Einsatzes 
  • Teilnahme an regelmäßigen Meetings mit Kunden, um Anforderungen zu klären, Feedback zu geben und Updates zur Modellleistung zu liefern
Dein Profil
  • Mindestens 1 Jahr Erfahrung in der Datenanalyse, idealerweise mit Erfahrung im Umgang mit großen Sprachmodellen oder anderen KI Modellen 
  • Fundiertes Verständnis von statistischen Methoden und Data-Mining-Techniken 
  • Erfahrung im Umgang mit gängigen Datenanalyse- und Visualisierungstools (z. B. Python, R, SQL, Tableau) 
  • Kenntnisse im maschinellen Lernen und der natürlichen Sprachverarbeitung (NLP) sind von Vorteil 
  • Hervorragende Kommunikationsfähigkeiten in Deutsch und Englisch, mit der Fähigkeit, komplexe technische Informationen klar und verständlich zu vermitteln 
  • Fähigkeit, effektiv mit verschiedenen Teams zusammenzuarbeiten und deren Bedürfnisse zu verstehen
  •  Erfahrung im Kundenmanagement und im Umgang mit Stakeholder-Erwartungen 
  • Problemlösungsfähigkeiten und eine proaktive Herangehensweise an Herausforderungen
  •  Detailorientiert, mit ausgeprägten organisatorischen Fähigkeiten und der Bereitschaft, an mehreren Kundenprojekten gleichzeitig zu arbeiten 
  • Proaktive Einstellung und Leidenschaft dafür, Daten zu nutzen, um Geschäftsverbesserungen voranzutreiben und die Kundenerfahrungen zu verbessern
Unser Versprechen
  • Wir vertrauen darauf, dass großartige Menschen großartige Dinge tun und langfristig etwas bewirken können - als junges und schnell wachsendes Scale-up garantieren wir Dir Autonomie und Eigenverantwortung sinnvolle Aufgaben zu übernehmen, die sich direkt auf den Unternehmenserfolg auswirken 
  • Wir legen großen Stellenwert auf unsere Unternehmenskultur, in der persönliche und berufliche Weiterentwicklung genauso wichtig sind wie das wirtschaftliche Wachstum unseres Unternehmens. Du wirst vom ersten Tag an gefordert, geschätzt und für deine Persönlichkeit & Skills anerkannt. 
  • Wir glauben, dass unterschiedliche Perspektiven und Diversity Hypatos zu einer einzigartigen Symbiose machen - deshalb engagieren wir uns für den Aufbau einer vielfältigen und integrativen Umgebung, in der Sie sich alle Mitwirkenden zugehörig fühlen 
  • Neben einem individuellen Vergütungspaket, das auch Unternehmensanteile beinhaltet, erwartet dich eine einzigartige Kombination aus beruflichen Möglichkeiten, Unternehmergeist, technologischer Exzellenz und Branchenerfahrung 
Über uns
Hypatos is an AI/Machine Learning technology company, applying Deep Learning technology to liberate back-office tasks from manual data entry. We are building advanced Machine Learning models to process complex semi-structured document processing tasks to save costs and enhance organizational efficiency. Our clients benefit from increased processing speed, cost savings, and higher data quality.

We are at a very exciting growth stage at this moment - with a successful Series A funding round from investors including Blackfin Tech, Grazia Equity, UVC Partners, and Plug & Play Ventures, we are expanding our portfolio of AI models and growing internationally, aiming to become a global technology powerhouse. Join us to be part of the mission of improving the way hundreds of millions of people work every day.

Required profile

Experience

Level of experience: Junior (1-2 years)
Spoken language(s):
GermanGermanEnglish
Check out the description to know which languages are mandatory.

Other Skills

  • Verbal Communication Skills
  • Organizational Skills
  • Detail Oriented
  • Problem Solving

Related jobs