KI-Risiken müssen in sozialen Organisationen so bewertet werden, dass Geschäftsführung, Qualitätsmanagement und Fachpraxis damit arbeiten können. Entscheidend ist nicht eine perfekte Risikotheorie, sondern eine gemeinsame Sprache: Was ist eher unkritisch, was braucht Prüfung, was ist hochriskant und was ist ausgeschlossen

Kurzantwort

KI-Risiken in sozialen Organisationen lassen sich pragmatisch in vier KI-Risikoklassen einordnen: geringes Risiko, prüfpflichtige Nutzung, hohes Risiko und ausgeschlossene Nutzung. Diese Klassen ersetzen keine Rechts- oder Datenschutzprüfung, schaffen aber eine gemeinsame erste Orientierung.

Geringer ist das Risiko meist bei allgemeinen Aufgaben ohne Personenbezug, etwa Ideensammlung oder sprachlicher Strukturierung. Prüfpflichtig wird KI-Nutzung, wenn interne Informationen, personenbezogene Daten, vertrauliche Inhalte, Fachentscheidungen oder neue Tools betroffen sind. Hochriskant wird sie, wenn Ergebnisse Menschen spürbar betreffen können, etwa in Hilfeplanung, Kinderschutz, Leistungszugang, Personalentscheidungen oder Bewertungen von Schutzbedarf.

Ausgeschlossen oder nur unter sehr engen, gesondert geprüften Bedingungen denkbar ist KI-Nutzung dort, wo Menschen automatisiert bewertet, priorisiert oder in ihrem Zugang zu Hilfe, Schutz, Teilhabe oder Leistungen beeinflusst werden könnten. Für Geschäftsführung und QM ist eine einfache KI-Risikomatrix deshalb ein Werkzeug, um Freigaben, Schulungen und Dokumentation passend zu dosieren.

Wann gering, wann prüfpflichtig, wann hochriskant

Die hier verwendete Risikoklasse hohes Risiko ist eine organisationspraktische Einordnung und nicht automatisch mit der rechtlichen Kategorie eines Hochrisiko-KI-Systems nach der KI-Verordnung gleichzusetzen.

Einstufung Kurzsignal Typische Entscheidung
Gering Allgemeiner Zweck, kein Personenbezug, keine vertraulichen Inhalte. Nutzung nach interner Grundregel und fachlicher Plausibilitätsprüfung.
Prüfpflichtig Interne Informationen, mögliche Personenbezüge, neues Tool oder wiederkehrende Nutzung. Toolantrag, Risikobewertung und Freigabeweg auslösen.
Hochriskant Sensible Daten, schutzbedürftige Personen oder mögliche Folgen für Hilfe, Schutz, Teilhabe oder Leistungen. Gesonderte Prüfung durch Geschäftsführung, Datenschutz, IT, QM und Fachpraxis.
Ausgeschlossen Ungeprüfte Tools, echte Falldaten, automatisierte Bewertung oder Ersatz fachlicher Verantwortung. Nicht nutzen; sichere Alternative oder gesondert geprüftes Verfahren wählen.

Warum KI-Risiken praktisch bewertet werden müssen

Viele Organisationen stehen zwischen zwei Polen: Auf der einen Seite gibt es echte Entlastungspotenziale, etwa bei Strukturierung, Recherche, Formulierung oder Verwaltung. Auf der anderen Seite arbeiten soziale Organisationen mit vertraulichen Informationen, schutzbedürftigen Menschen und fachlich sensiblen Entscheidungen. Ein pauschales Ja oder Nein zu KI hilft deshalb selten.

Eine einfache KI-Risikobewertung macht KI-Nutzung besprechbar. Sie hilft, Toolwünsche zu sortieren, Pilotprojekte zu begrenzen und Teams nicht mit jeder Detailfrage allein zu lassen. Sie macht auch sichtbar, wann ein Thema nicht in ein einzelnes Team gehört, sondern Leitung, Datenschutz, IT, Qualitätsmanagement und Fachpraxis gemeinsam braucht.

Wichtig ist die Trennung zwischen rechtlicher Risikokategorie und organisationspraktischer Risikoklasse. Der AI Act verfolgt einen risikobasierten Ansatz und definiert unter anderem verbotene Praktiken und Hochrisiko-KI-Systeme. Die interne KI-Risikomatrix ersetzt keine Einordnung nach der KI-Verordnung und ist bewusst als organisationspraktisches Steuerungsinstrument gedacht. Sie unterstützt KI-Governance, indem sie Arbeitsalltag, Datenschutz, Fachlichkeit und Verantwortung zusammenführt.

Sechs Kriterien für die erste Einordnung

Eine praxistaugliche KI-Risikobewertung beginnt nicht mit technischen Modellnamen. Sie beginnt mit dem Anwendungsfall. Dasselbe Tool kann risikoarm oder hochriskant sein, je nachdem wofür es genutzt wird, welche Daten eingegeben werden und welche Folgen das Ergebnis hat.

  • Zweck: Geht es um Ideensammlung, Textstruktur, Recherche, Dokumentation, fachliche Bewertung oder Entscheidungsvorbereitung
  • Datenarten: Sind personenbezogene Daten, Sozialdaten, Gesundheitsdaten, Falldaten, Personalinformationen oder vertrauliche Interna betroffen
  • Betroffene Personen: Geht es um Kinder, Jugendliche, Menschen in Krisen, Menschen mit Behinderung, Klientinnen und Klienten oder Mitarbeitende
  • Folgen: Kann das Ergebnis Hilfezugang, Schutzentscheidungen, fachliche Einschätzungen, Teilhabe, Leistungsfragen oder Personalentscheidungen beeinflussen
  • Toolstatus: Ist das KI-Tool intern geprüft, freigegeben und für diesen Zweck geeignet
  • Menschliche Aufsicht: Ist klar, wer Ergebnisse prüft, korrigiert und verantwortet

Was Geschäftsführung konkret entscheiden muss

KI-Risikobewertung braucht eine klare Entscheidung der Geschäftsführung oder Trägerleitung. Sie muss nicht jede einzelne Toolfrage selbst prüfen, aber sie muss den verbindlichen KI-Governance-Rahmen setzen, in dem Prüfung, Freigabe und Nutzung stattfinden.

  • Risikoklassen beschließen: Welche Stufen gelten in der Organisation und welche Konsequenz hat jede Stufe
  • Freigabeprozess festlegen: Ab wann braucht es Toolantrag, Datenschutzprüfung, IT-Prüfung, QM-Nachweis oder Leitungsentscheidung
  • Verantwortlichkeiten benennen: Wer darf KI-Nutzung freigeben, wer prüft Datenschutz, wer bewertet Fachlichkeit, wer dokumentiert
  • Ressourcen bereitstellen: Wer bekommt Zeit für Prüfung, Schulung, Toolbewertung, Aktualisierung und interne Beratung
  • Grenzen verbindlich machen: Welche Nutzungen sind ausgeschlossen oder nur unter sehr engen, gesondert geprüften Bedingungen denkbar
  • Review steuern: Wann wird die Risikomatrix überprüft und wer berichtet an Geschäftsführung oder Leitungsgremium

Rollen von QM, Datenschutz, IT und Fachpraxis

Qualitätsmanagement kann die KI-Risikomatrix operativ in bestehende Prozesse übersetzen. Dazu gehören ein Toolantrag, ein kurzes Risikobewertungsformular, Versionierung der Freigaben, eine Review-Frist, Abweichungsmanagement und nachvollziehbare Nachweisführung. So wird KI nicht als Sonderthema neben dem QM geführt, sondern als prüfbarer Bestandteil von Qualität, Verantwortung und Organisationslernen.

Ein einfacher QM-Ablauf kann so aussehen: Toolwunsch erfassen, Zweck und Datenarten beschreiben, vorläufige Risikoklasse vergeben, Datenschutz und IT je nach Anwendungsfall einbinden, fachliche Bewertung dokumentieren, Entscheidung versionieren, Review-Termin setzen und Abweichungen festhalten. Wichtig ist, dass die Dokumentation schlank bleibt und trotzdem zeigt, warum eine Nutzung erlaubt, prüfpflichtig, hochriskant oder ausgeschlossen ist.

Datenschutz prüft je nach konkretem Anwendungsfall Datenarten, Rechtsgrundlagen, Auftragsverarbeitung und mögliche Datenschutz-Folgenabschätzungen. IT bewertet Sicherheit, Anbieter, Schnittstellen und Betrieb. Die Fachpraxis bewertet, ob ein Einsatz fachlich sinnvoll, vertretbar und menschenbezogen verantwortbar ist.

Gerade in sozialen Organisationen darf die fachliche Perspektive nicht nachträglich angehängt werden. Eine technische Freigabe beantwortet nicht automatisch, ob ein KI-Einsatz im Beratungs-, Hilfe- oder Schutzkontext fachlich verantwortbar ist.

Praxisbeispiele

Konzepttext für ein neues Gruppenangebot

Eine Bereichsleitung möchte eine allgemeine Gliederung für ein Gruppenangebot entwickeln. Es werden keine Namen, Fallverläufe, Teamkonflikte oder vertraulichen Interna eingegeben. Das Risiko ist eher gering, wenn ein freigegebenes Tool genutzt wird und das Ergebnis fachlich geprüft wird. Die Leitplanke lautet: allgemeine Aufgaben ja, personenbezogene oder vertrauliche Details nein.

KI-Unterstützung in einer Fallbesprechung

Ein Team möchte eine KI nutzen, um Optionen für eine komplexe Fallbesprechung zu sammeln. Betroffen sind Kinderschutzfragen, Familiendynamik, Gesundheitsinformationen und fachliche Einschätzungen. Das Risiko ist hoch. Ohne klare Datenschutzprüfung, fachliche Grenzen, Toolfreigabe und menschliche Verantwortung darf ein solcher Einsatz nicht stattfinden. Wenn überhaupt, können stark abstrahierte Musterfälle für Lernzwecke genutzt werden.

Anonymisierte Fallskizze aus SPFH oder Beratungsstelle

Ein Team fragt, ob eine anonymisierte Fallskizze zur Reflexion mit KI bearbeitet werden darf. Die Antwort hängt nicht allein davon ab, ob Namen entfernt wurden. Entscheidend ist, ob Familie, Kind, Einrichtung oder Lebenslage durch Kombinationen aus Alter, Ort, Ereignis, Hilfeverlauf oder seltenen Merkmalen indirekt erkennbar bleiben. In der internen Matrix wäre das mindestens prüfpflichtig, bei sensiblen Schutz- oder Gesundheitsinformationen hochriskant. Besser ist eine abstrahierte Lernvignette, die fachlich vergleichbar ist, aber keinen echten Fall rekonstruierbar macht.

Schulsozialarbeit und Eingliederungshilfe

Eine Schulsozialarbeiterin möchte eine KI nutzen, um Gesprächsnotizen zu sortieren; ein Team der Eingliederungshilfe möchte Unterstützungsbedarfe für eine interne Reflexion strukturieren. In beiden Fällen können personenbezogene Daten, Gesundheitsinformationen, Teilhabebedarfe, familiäre Belastungen oder schulische Konflikte berührt sein. Die Nutzung wäre deshalb mindestens prüfpflichtig, häufig hochriskant. Verantwortbar wird ein Einsatz erst, wenn Datenarten, Zweck, Toolfreigabe, fachliche Kontrolle und Datenschutz je nach konkretem Anwendungsfall geklärt sind.

Risikoklassen für die Praxis

Risikoklasse Typische Merkmale Beispiele Leitplanke
Geringes Risiko Kein Personenbezug, keine vertraulichen Daten, keine fachliche Entscheidung. Ideensammlung, Gliederung, allgemeine Formulierungshilfe. Nutzung nur mit freigegebenem Tool und fachlicher Plausibilitätsprüfung.
Prüfpflichtige Nutzung Interne Informationen, mögliche Personenbezüge, wiederkehrende Nutzung oder neues Tool. Teamvorlagen, interne Prozessbeschreibungen, Protokollunterstützung. Vorher Zweck, Datenarten, Toolstatus, Löschung und Zuständigkeit klären.
Hohes Risiko Sensible Daten, schutzbedürftige Personen, fachliche Einschätzungen oder Folgen für Menschen. Hilfeplanung, Schutzbedarf, Leistungszugang, Risikoeinschätzung, Personalfragen. Nur nach gemeinsamer Prüfung durch Leitung, Datenschutz, IT, QM und Fachpraxis.
Ausgeschlossene Nutzung Ungeprüfte Tools, vertrauliche Falldaten, automatisierte Bewertung von Menschen oder Ersatz fachlicher Verantwortung. Echte Falldaten in externes Tool eingeben, KI über Kindeswohl oder Hilfebedarf entscheiden lassen. Nicht nutzen; sichere Alternativen und fachliche Verfahren verwenden.

Checkliste: KI-Risiko vor der Nutzung einschätzen

  • Ist der Zweck der KI-Nutzung klar beschrieben?
  • Geht es nur um Struktur, Sprache oder Ideen, oder um fachliche Bewertung
  • Enthält die Eingabe personenbezogene, vertrauliche oder sensible Daten
  • Sind Kinder, Jugendliche, Klientinnen, Klienten oder andere schutzbedürftige Personen betroffen?
  • Können KI-Ergebnisse Entscheidungen, Hilfeprozesse, Schutzfragen oder Leistungszugang beeinflussen?
  • Ist das Tool für diesen Zweck intern freigegeben?
  • Ist geregelt, wer das Ergebnis fachlich prüft und verantwortet?
  • Wurde Datenschutz eingebunden, wenn Datenrisiken bestehen
  • Wurde IT eingebunden, wenn ein neues Tool, Anbieter oder eine Schnittstelle betroffen ist
  • Gibt es eine sichere Alternative ohne externe KI-Nutzung?
  • Ist dokumentiert, warum die Nutzung erlaubt, prüfpflichtig, hochriskant oder ausgeschlossen ist?

Häufige Fragen

Welche KI-Nutzung ist riskant?

Riskant wird KI-Nutzung vor allem dann, wenn personenbezogene oder vertrauliche Daten betroffen sind, wenn Ergebnisse fachliche Entscheidungen beeinflussen, wenn Menschen dadurch Nachteile entstehen können oder wenn ein Tool ohne Freigabe im Arbeitskontext genutzt wird.

Wie lassen sich KI-Risiken einfach einstufen?

Für die Praxis helfen vier Stufen: geringes Risiko, prüfpflichtige Nutzung, hohes Risiko und ausgeschlossene Nutzung. Entscheidend sind Zweck, Datenarten, mögliche Folgen für Menschen, Vertraulichkeit, Toolfreigabe und menschliche Aufsicht.

Wann braucht es eine Freigabe?

Eine Freigabe braucht es immer dann, wenn KI im Arbeitskontext regelmäßig genutzt werden soll, wenn personenbezogene oder vertrauliche Informationen betroffen sein könnten, wenn Ergebnisse in Prozesse einfließen oder wenn ein neues Tool eingeführt wird.

Ist der AI Act gleichbedeutend mit einer internen Risikomatrix?

Nein. Der AI Act beschreibt rechtliche Risikokategorien und Pflichten. Eine interne Risikomatrix übersetzt diese Orientierung in alltagstaugliche Prüffragen für Organisation, Fachpraxis, Datenschutz, IT und Qualitätsmanagement.

Was ist der Unterschied zwischen hohem Risiko nach AI Act und hohem Risiko in unserer internen Matrix?

Hohes Risiko nach AI Act ist eine rechtliche Kategorie mit konkreten Anforderungen. Hohes Risiko in einer internen Matrix ist eine organisationspraktische Warnstufe. Die hier verwendete Risikoklasse hohes Risiko ist nicht automatisch mit der rechtlichen Kategorie eines Hochrisiko-KI-Systems nach der KI-Verordnung gleichzusetzen.

Wer bewertet KI-Risiken in sozialen Organisationen?

KI-Risiken sollten gemeinsam bewertet werden: Leitung verantwortet den Rahmen, Fachpraxis bewertet fachliche Folgen, Datenschutz prüft Datenrisiken, IT bewertet technische Aspekte und Qualitätsmanagement sichert Verfahren und Nachweise.

Dürfen anonymisierte Fallbeispiele mit KI bearbeitet werden?

Nur wenn die Anonymisierung belastbar ist und die Organisation dafür klare Regeln festgelegt hat. Das Entfernen von Namen reicht oft nicht, weil seltene Kombinationen aus Ort, Alter, Ereignis oder Hilfeverlauf eine Re-Identifikation ermöglichen können.

Wer dokumentiert die Risikoeinstufung?

Die Dokumentation sollte in einem festgelegten Freigabe- oder QM-Prozess erfolgen. Praktisch kann das Qualitätsmanagement die Nachweisführung strukturieren, während Leitung, Datenschutz, IT und Fachpraxis ihre jeweiligen Prüfbeiträge liefern.

Wann muss eine Datenschutz-Folgenabschätzung geprüft werden?

Ob eine Datenschutz-Folgenabschätzung zu prüfen ist, hängt vom konkreten Anwendungsfall ab. Hinweise darauf können sensible Daten, umfangreiche Verarbeitung, neue Technologien, schutzbedürftige Personen oder erhebliche mögliche Folgen für Betroffene sein.

Wann ist KI-Nutzung auszuschließen?

Ausgeschlossen oder nur unter sehr engen, gesondert geprüften Bedingungen denkbar ist KI-Nutzung dort, wo Menschen automatisiert bewertet, priorisiert oder in ihrem Zugang zu Hilfe, Schutz, Teilhabe oder Leistungen beeinflusst werden könnten.

Weitere Fachimpulse im Zusammenhang

Zur organisatorischen Einordnung passt KI-Leitlinien für soziale Organisationen entwickeln. Die Frage, wie verdeckte KI-Nutzung sichtbar und steuerbar wird, vertieft Schatten-KI vermeiden. Die Datenschutzperspektive vertieft KI und Datenschutz in der Sozialen Arbeit: Leitplanken statt Toolverbote. Welche Daten nicht ungeprüft in KI-Tools gehören, zeigt KI und Datenschutz: Welche Daten gehören nicht ungeprüft in KI-Tools. Wie Risikobewertung in QM-Aufgaben, Checklisten und Reviews übersetzt werden kann, zeigt KI im Qualitätsmanagement. Wenn aus einem Risiko ein Fehler, eine Beschwerde oder ein Datenschutzthema wird, ordnet KI-Fehler, Datenpannen und Beschwerden den passenden Incident-Prozess ein. Diskriminierungs- und Fairnessrisiken vertieft KI-Bias in der Sozialen Arbeit. Warum Verantwortung bei Schutzentscheidungen und Einzelfallbewertungen nicht automatisiert werden kann, vertieft KI und Fachlichkeit in der Sozialen Arbeit. Für Beratungs- und Fallarbeitskontexte ergänzt KI in Beratung und Case Management die Abgrenzung zwischen Unterstützung, Prüfung und nicht delegierbaren Aufgaben. Für Dokumentationsfragen ergänzt KI in der Dokumentation sozialer Arbeit den Blick auf Falldaten und Anonymisierung.

Für niedrigschwellige und sozialräumliche Angebote ergänzt KI in niedrigschwelligen Angeboten und Quartiersarbeit die Perspektive auf Zugang, Barrieren und nicht freigegebene KI-Systeme. Die Teilhabeperspektive vertieft KI und Teilhabe: Chancen und Ausschlussrisiken. Für die praktische Umsetzung eines begrenzten Testlaufs ergänzt KI-Pilotprojekt starten die nächste Ebene.

Als weitere Brücken in die Praxis eignen sich KI-Brückenfunktion als Organisationshilfe, KI-Schulung in der Jugendhilfe, KI in sozialen Organisationen: Warum Kosten-Nutzen kein Tabuthema sein darf, KI gegen Fachkräftemangel Realistische Entlastung statt falscher Erwartungen und der Praxis-Kompass.

Quellen

  1. Verordnung (EU) 2024/1689 über künstliche Intelligenz (AI Act / KI-Verordnung), einschließlich Erwägungsgründen, EUR-Lex
  2. Verordnung (EU) 2016/679 Datenschutz-Grundverordnung (DSGVO), EUR-Lex
  3. Datenschutzkonferenz: Orientierungshilfe Künstliche Intelligenz und Datenschutz, generative KI und Verantwortlichenpflichten, Stand 06.05.2024
  4. European Data Protection Board: Opinion 28/2024 on certain data protection aspects related to the processing of personal data in the context of AI models, 18.12.2024
  5. Der Bundesbeauftragte für den Datenschutz und die Informationsfreiheit: KI in Behörden - Datenschutz von Anfang an mitdenken
  6. Bundesnetzagentur: KI-Kompetenz
  7. Bundesnetzagentur: Risikostufen der KI-Verordnung
  8. Datenschutzkonferenz: Orientierungshilfe zu datenschutzrechtlichen Besonderheiten generativer KI-Systeme mit RAG-Methode, Stand 17.10.2025
  9. National Institute of Standards and Technology: AI Risk Management Framework
  10. NIST: Artificial Intelligence Risk Management Framework (AI RMF 1.0)
Nächster Schritt

Eine einfache KI-Risikomatrix vorbereiten

Eine einfache KI-Risikomatrix ist häufig ein sinnvoller nächster Schritt. Der Praxis-Kompass von KI-Leitplanken beschreibt dazu einen möglichen Einstieg über Status-Quo-Check, Zuständigkeiten und erste Leitplanken. Daraus entstehen klare Stufen für erlaubte, prüfpflichtige, hochriskante und ausgeschlossene Nutzung.

Transparenzhinweis

Dieser Fachimpuls wird von Simon Kern verantwortet. Er entsteht auf Grundlage fachlicher Erfahrung in KI, Datenschutzsensibilität, digitaler Organisationsentwicklung und sozialer Praxis. KI-Systeme können bei Recherche, Strukturierung oder Formulierung unterstützen. Auswahl, Einordnung, fachliche Bewertung und Verantwortung liegen beim Autor. Alle Inhalte werden vor einer Veröffentlichung fachlich und redaktionell geprüft.

Hinweis zu Rechts-, Datenschutz- und Compliance-Fragen

Dieser Fachimpuls stellt keine Rechtsberatung, keine verbindliche Datenschutzberatung und keine Einzelfallbewertung dar. Er dient ausschließlich der fachlichen Orientierung und Information. Je nach Organisation, Datenlage, eingesetztem Tool, Vertragsgestaltung und konkretem Anwendungsfall kann eine individuelle rechtliche, datenschutzrechtliche oder organisatorische Prüfung erforderlich sein. Bei rechtlichen, datenschutzrechtlichen, aufsichtsrechtlichen oder Compliance-relevanten Fragestellungen sollten Datenschutzbeauftragte, Rechtsberatung oder andere zuständige Stellen einbezogen werden.