LLM-Agenten simulieren kulturelle Bürgerreaktionen auf Bürokratie – neue Methode

In einer aktuellen Veröffentlichung auf arXiv wird ein innovativer Ansatz vorgestellt, der die Art und Weise, wie Bürger auf bürokratisches Red‑Tape reagieren, in unterschiedlichen Kulturen simuliert. Ziel ist es, die Entscheidungsfindung in der öffentlichen Verwaltung zu verbessern, indem die emotionalen Reaktionen der Bevölkerung besser verstanden und vorhergesagt werden.

Frühere experimentelle Studien haben gezeigt, dass die emotionale Reaktion von Bürgern auf bürokratische Hürden stark von kulturellen Hintergründen abhängt. Während große Sprachmodelle (LLM) die Möglichkeit bieten, menschenähnliche Antworten zu generieren und damit experimentelle Kosten zu senken, blieb bislang unklar, ob sie tatsächlich kulturangepasste Emotionen reproduzieren können. Die Autoren haben deshalb ein neues Evaluationsframework entwickelt, um die Fähigkeit von LLMs zu prüfen, in verschiedenen kulturellen Kontexten angemessen zu reagieren.

Im Pilotversuch wurde das Framework auf ein einzelnes Red‑Tape-Szenario angewendet. Die Ergebnisse zeigen, dass alle getesteten Modelle nur begrenzt mit den tatsächlichen menschlichen Emotionen übereinstimmen, wobei die Leistung in ostasiatischen Kulturen besonders schwächer ausfällt. Versuche, die Modelle durch kulturelle Prompting‑Strategien zu verbessern, erwiesen sich größtenteils als wenig wirksam.

Zur weiteren Erforschung und Verbesserung der Modelle wurde die interaktive Plattform RAMO eingeführt. Diese ermöglicht es, Bürgerreaktionen auf bürokratische Hürden zu simulieren und gleichzeitig echte menschliche Daten zu sammeln, um die Modelle zu verfeinern. Die Plattform ist öffentlich zugänglich unter https://ramo-chi.ivia.ch.