Rostislav Nedelchev ist Doktorand am ML2R-Standort der Universität Bonn und arbeitet als Senior Machine Learning Engineer bei der Alexander Thamm GmbH. Rostislavs Forschungsinteressen liegen in den Bereichen Natural Language Processing, Machine Learning und Data Science. Insbesondere beschäftigt er sich mit der automatischen Evaluation von Dialogsystemen.
Bisher erstellen Sprachmodell-basierte Bewertungen von Chatbots nur einen Score über die Gesamtqualität, ohne beispielsweise den Zusammenhang des Dialogs zu beachten. Mit Modellen, die auf GLUE-Aufgaben trainiert sind, hat das ein Ende.
Dialogsysteme sind in Sprachassistenten wie Siri oder Alexa oder in Chatbots auf Social-Media-Plattformen weit verbreitet. Aber woher weiß man, dass der eigens entwickelte Chatbot tatsächlich funktioniert?
