Einordnung statt Gewissheit: Dialogatlas trennt Quellen, Beobachtungen und redaktionelle Schlussfolgerungen. Neue Daten können diese Einordnung verändern.
Die eigentliche Streitfrage liegt zwischen Wirkung und Vertrauen
Die Leitpublikation fragte, ob dialogfähige Systeme die psychische Gesundheit verbessern können und ob ihre Nutzung sicher ist. Als Gesprächssysteme fasste sie Anwendungen, die mittels gesprochener, geschriebener oder visueller Sprache mit Menschen interagieren. Den Hintergrund bildete der weltweite Mangel an Fachkräften für psychische Gesundheit. Dieser Versorgungskontext erklärt das Interesse an technischer Unterstützung, beweist aber weder deren Wirksamkeit noch ihre Eignung für konkrete Versorgungsaufgaben.
Entscheidend ist daher nicht, ob solche Systeme grundsätzlich Potenzial besitzen. Das räumt die Übersicht ausdrücklich ein. Entscheidend ist, welche Schlussfolgerung die vorhandenen Untersuchungen tatsächlich tragen. Unsere Einordnung: Ein positives Symptomsignal, ein angenehmes Gespräch und das Ausbleiben dokumentierter Schäden sind drei verschiedene Befunde. Wer sie zu einem allgemeinen Qualitätsurteil zusammenzieht, macht aus unvollständiger Evidenz eine Gewissheit, die in den Quellen nicht vorhanden ist.
Breite Suche, schmale Ergebnisbasis
Für die systematische Übersicht recherchierten die Autor:innen in sieben bibliografischen Datenbanken, darunter MEDLINE, EMBASE und PsycINFO, außerdem in Google Scholar. Hinzu kamen Prüfungen der rückwärts- und vorwärtsgerichteten Literaturverweise eingeschlossener Studien und einschlägiger Übersichten. Zwei Prüfende wählten Studien unabhängig voneinander aus, extrahierten die Daten und bewerteten das Verzerrungsrisiko. Je nach Eignung wurden die Befunde narrativ oder statistisch zusammengeführt. Die Übersicht war zudem im PROSPERO-Register verzeichnet.
Von 1.048 gefundenen Literaturangaben wurden zwölf Studien eingeschlossen. Sie untersuchten zusammen acht Ergebnisbereiche. Diese Zahlen sind für die Interpretation wichtiger als das Etikett Metaanalyse: Eine statistische Zusammenführung kann verstreute Befunde ordnen, sie vermehrt aber nicht automatisch die Zahl hochwertiger Untersuchungen pro Ergebnisbereich. Die Autor:innen benennen ausdrücklich, dass für einzelne Endpunkte nur wenige Studien vorlagen und bei den eingeschlossenen Arbeiten ein hohes Verzerrungsrisiko bestand. Die methodische Breite der Suche trifft somit auf eine begrenzte und anfällige Primärliteratur.
Einige Beschwerden verbesserten sich, andere Befunde blieben offen
Die Übersicht fand schwache Evidenz dafür, dass die untersuchten Systeme Depression, psychische Belastung, Stress und Höhenangst verbessern konnten. Für das subjektive psychische Wohlbefinden zeigte sich auf ähnlich schwacher Evidenzbasis dagegen kein statistisch signifikanter Effekt. Bei der Schwere von Angst sowie bei positivem und negativem Affekt waren die Resultate widersprüchlich. Schon diese Verteilung widerspricht der Vorstellung einer einheitlichen Wirkung auf psychische Gesundheit.
Die angemessene Lesart lautet deshalb nicht, KI-Gespräche wirkten oder wirkten nicht. Der Quellenbefund ist enger: Bei einigen gemessenen Endpunkten gab es positive Signale, bei einem anderen keinen statistisch signifikanten Effekt und bei weiteren keine konsistente Richtung. Daraus lässt sich weder eine allgemeine Wirksamkeit ableiten noch eine Rangordnung gegenüber anderen Angeboten. Solche Vergleiche wären nur zulässig, wenn sie durch entsprechende Studiendesigns und Daten gedeckt wären; die bereitgestellten Quellen liefern dafür keine Grundlage.
Statistische Veränderung ist noch keine klinisch wichtige Veränderung
Die Autor:innen beschränken ihre Schlussfolgerung nicht zufällig auf Potenzial. Sie sahen keine ausreichende Evidenz für ein definitives Urteil. Als Gründe nennen sie neben dem hohen Verzerrungsrisiko, der geringen Zahl von Studien je Ergebnis und den widersprüchlichen Befunden auch das fehlende Wissen darüber, ob beobachtete Effekte klinisch bedeutsam waren. Damit markieren sie eine Grenze, die in Produktkommunikation und öffentlicher Debatte leicht verloren geht.
Ein statistischer Unterschied beantwortet zunächst eine statistische Frage. Ob eine Veränderung für Betroffene relevant, dauerhaft oder im Versorgungskontext bedeutsam ist, folgt daraus nicht automatisch. Die Metaanalyse belegt diese weitergehenden Eigenschaften nicht. Unsere redaktionelle Position ist daher streng: Ein Anbieter oder eine Institution sollte einen gemessenen Symptomendpunkt nicht sprachlich zu umfassender psychischer Verbesserung aufwerten. Die Reichweite einer Behauptung darf nicht größer sein als die Reichweite des untersuchten Ergebnisses.
Nicht gemeldeter Schaden ist keine belastbare Entwarnung
Besonders dünn ist die Grundlage für Aussagen zur Sicherheit. Nur zwei der zwölf eingeschlossenen Studien bewerteten sie. Diese Untersuchungen kamen zu dem Ergebnis, die Systeme seien sicher, weil keine unerwünschten Ereignisse oder Schäden berichtet wurden. Die Metaanalyse übernimmt daraus jedoch keine endgültige Sicherheitsgewissheit, sondern fordert weitere Forschung, um tragfähige Schlussfolgerungen zu Wirksamkeit und Sicherheit ziehen zu können.
Hier liegt der Kernkonflikt des Artikels. Das Ausbleiben gemeldeter Schäden kann verschiedene Gründe haben; welche davon in den beiden Studien eine Rolle spielten, geht aus den bereitgestellten Angaben nicht hervor. Genau deshalb wäre jede weitergehende Erklärung Spekulation. Sicher sagen lässt sich nur: Zwei Studien ohne berichtete Schadensereignisse bilden eine sehr begrenzte Beobachtungsbasis. Aus redaktioneller Sicht ist es unvertretbar, daraus ein allgemeines Sicherheitsversprechen für KI-Gespräche im Bereich psychischer Gesundheit abzuleiten.
Positive Wahrnehmung beantwortet eine andere Frage
Die dritte Quelle erweitert das Bild um die Perspektive der Nutzenden. Für diese Scoping Review wurden acht elektronische Datenbanken sowie vorwärts- und rückwärtsgerichtete Literaturverweise durchsucht. Zwei Prüfende wählten unabhängig voneinander Studien aus und extrahierten deren Daten. Von 1.072 gefundenen Literaturangaben gingen 37 eigenständige Studien in eine thematische Analyse ein. Daraus entstanden zehn Themen: Nützlichkeit, Bedienungsfreundlichkeit, Reaktionsfähigkeit, Verständlichkeit, Akzeptanz, Attraktivität, Vertrauenswürdigkeit, Freude an der Nutzung, Inhalte und Vergleiche.
Insgesamt berichtete die Übersicht überwiegend positive Wahrnehmungen und Meinungen. Zugleich identifizierte sie konkrete offene Probleme: Die sprachlichen Fähigkeiten müssten unerwartete Eingaben besser verarbeiten, hochwertige und variablere Antworten erzeugen und Inhalte stärker mit individuellen Behandlungsempfehlungen abstimmen. Die Autor:innen sehen hierfür einen Bedarf an personalisierten Gesprächen. Diese Ergebnisse sind für Gestaltung und Einführung relevant. Sie belegen jedoch nicht, dass positiv bewertete Systeme Beschwerden zuverlässig verbessern oder selten Schaden verursachen. Wahrgenommene Nützlichkeit und nachgewiesene Wirkung bleiben unterschiedliche Kategorien.
Der Preprint verdoppelt die Evidenz nicht
Die zweite Quelle ist die 2019 veröffentlichte Preprint-Fassung der späteren Metaanalyse. Sie nennt dieselbe Forschungsfrage, dieselben Suchwege, 1.048 gefundene Literaturangaben, zwölf eingeschlossene Studien, acht Ergebnisbereiche und dieselben zentralen Resultate. Auch die Begründung für das zurückhaltende Schlussurteil stimmt überein. Der Preprint dokumentiert damit die Publikationsgeschichte der Leitstudie, stellt aber keine unabhängige Bestätigung durch eine zweite Forschungsgruppe oder einen weiteren Datenbestand dar.
Diese Unterscheidung ist mehr als bibliografische Pedanterie. Drei Quellen bedeuten hier nicht drei voneinander unabhängige Evidenzkörper: Zwei Einträge gehören zu derselben systematischen Übersicht, der dritte untersucht Wahrnehmungen statt klinischer Wirkung und Sicherheit. Zusammengenommen liefern sie einen sinnvollen Kontrast zwischen Ergebnissen und Nutzungserfahrungen. Sie beantworten aber nicht sämtliche Fragen zu heutigen KI-Systemen, einzelnen Produkten, unterschiedlichen Einsatzbedingungen oder langfristigen Folgen. Diese Wissensgrenzen sollten sichtbar bleiben.
Gute Gespräche brauchen getrennte Qualitätsurteile
Aus den Quellen ergibt sich kein pauschales Verdikt gegen dialogfähige Systeme. Es gibt schwache Hinweise auf Verbesserungen bei einzelnen Beschwerden und überwiegend positive Wahrnehmungen. Beides verdient weitere Untersuchung. Ebenso klar ist jedoch, dass subjektive Zustimmung keine fehlenden Sicherheitsdaten ersetzt und ein statistischer Effekt nicht ohne Weiteres klinische Bedeutung besitzt. Die interessanteste Frage lautet deshalb nicht, ob Menschen gern mit einem System sprechen, sondern ob genau der behauptete Nutzen unter belastbaren Bedingungen nachgewiesen und der mögliche Schaden tatsächlich untersucht wurde.
Für Forschung, Produktentwicklung und Fachpraxis folgt daraus aus unserer Sicht ein nüchterner Maßstab: Wirkung, klinische Relevanz, Sicherheit und Nutzungserleben müssen separat ausgewiesen werden. Ein System kann verständlich und attraktiv sein, ohne seine gesundheitliche Wirkung bewiesen zu haben. Es kann bei einem Endpunkt ein positives Signal zeigen, ohne für andere Beschwerden geeignet zu sein. Und es kann in wenigen Studien ohne gemeldeten Schaden bleiben, ohne damit allgemein als sicher zu gelten. Gerade ein überzeugendes KI-Gespräch darf diese Unterschiede nicht verwischen. Seine sprachliche Qualität erhöht nicht die Beweiskraft der zugrunde liegenden Forschung.
Quellen & weiterführende Hinweise
- Alaa Abd‐Alrazaq, Asma Rababeh, Mohannad Alajlani (2020): Effectiveness and Safety of Using Chatbots to Improve Mental Health: Systematic Review and Meta-Analysis
- Alaa Abd‐Alrazaq, Asma Rababeh, Mohannad Alajlani (2019): Effectiveness and Safety of Using Chatbots to Improve Mental Health: Systematic Review and Meta-Analysis (Preprint)
- Alaa Abd‐Alrazaq, Mohannad Alajlani, Nashva Ali (2020): Perceptions and Opinions of Patients About Mental Health Chatbots: Scoping Review