KI in der Kindeswohl- und Jugendhilfeentscheidung: Risikoklasse und Pflichten im EU-KI-Recht
KI-Systeme, die in Entscheidungen der Kinder- und Jugendhilfe eingreifen (Risikoeinschätzung bei Kindeswohlgefährdung, Platzierungs-/Inobhutnahme-Empfehlungen, familiengerichtliche Gutachten-Unterstützung), sind nach Anhang III Nr. 5/6 AI Act HOCHRISKANT. Sie unterliegen spätestens am 2. Dezember 2027 (verschoben durch AI Omnibus 2026) dem Pflichtenbündel aus Art. 8–15 mit Schwerpunkt Daten-Governance/Bias-Prüfung (Art. 10), menschlicher Aufsicht (Art. 14 — sozialpädagogische/richterliche Letztverantwortung) und Aufzeichnung (Art. 12). Öffentliche Jugendämter als Betreiber müssen vor Inbetriebnahme eine Grundrechts-Folgenabschätzung erstellen (Art. 27 AI Act). Überlagert: Grundrecht des Kindeswohls (Art. 24 GRCh, UN-Kinderrechtskonvention), SGB VIII (Kinder- und Jugendhilfe), Familienverfahrensrecht (FamFG), DSGVO (besondere Datenkategorien Art. 9). Vollautomatische Inobhutnahmen sind rechtlich und ethisch ausgeschlossen.
Steve Baka
Hochrisiko nach Anhang III Nr. 5/6
Anhang III Nr. 5 erfasst KI zur Bewertung und Einordnung beim Zugang zu wesentlichen öffentlichen Dienstleistungen und Sozialleistungen (dazu gehört die Jugendhilfe); Nr. 6 kann Risikobewertungen in justiziellen/familiengerichtlichen Kontexten erfassen. Beispiele: Risiko-Scoring bei Kindeswohlgefährdung (§ 8a SGB VIII), Prognose-Tools für Wiederholungsrisiko, Unterstützung familiengerichtlicher Gutachter,Matching-Algorithmen für Pflegeplatz-Zuweisung. Grund: Eingriffe in Familie und Kindeswohl sind grundrechtsrelevant (Art. 6, 24 GRCh, UN-KRK); fehlerhafte/hochriskant-biased KI kann Familien zerstören oder Kinder gefährden. Volles Pflichtenbündel aus Art. 8–15 spätestens am 2. Dezember 2027 (verschoben durch AI Omnibus 2026).
Pflichten und Grundrechts-Folgenabschätzung
Art. 8–15 mit Schwerpunkt: Daten-Governance mit Bias-Prüfung (Art. 10 — besonders wichtig, da historische Fall-Daten soziale/ethnische Verzerrungen spiegeln); menschliche Aufsicht mit sozialpädagogischer/richterlicher Letztverantwortung (Art. 14); Aufzeichnung (Art. 12); Genauigkeit/Robustheit (Art. 15). Öffentliche Jugendämter als Betreiber: vor Inbetriebnahme Grundrechts-Folgenabschätzung nach Art. 27 AI Act (Art. 26 Abs. 7) — betroffene Personen/Gruppen (Kinder, Familien), spezifische Risiken, Maßnahmen, menschliche Aufsicht, Beschwerdeweg. Überlagert: SGB VIII (Verfahrensregelungen, §§ 8a, 42, 50), Familienverfahrensrecht (FamFG — Anhörung/Beteiligung), UN-KRK, DSGVO Art. 9 (Gesundheitsdaten, besondere Daten). Eine KI darf nicht ersetzen, sondern nur unterstützen — die sozialpädagogische/richterliche Verantwortung bleibt.
Praxis: Bias und internationale Vorfälle
KI in der Jugendhilfe ist besonders fehler- und biasanfällig. Internationale Vorfälle (z. B. das amerikanische APPROACH/Allegheny-System) haben gezeigt, dass Risiko-Scoring systematisch benachteiligte Familien (geringes Einkommen, Alleinerziehende, ethnische Minderheiten) überrepräsentiert — die KI lernt historische Überwachungsschwerpunkte und verstärkt sie (Feedback-Schleife). Art. 10 verlangt Bias-Prüfung; Art. 14 menschliche Aufsicht; Art. 22 DSGVO (Recht auf menschliche Prüfung bei automatisierten Entscheidungen mit rechtlicher/ähnlich weitreichender Wirkung — Kindeswohl-Entscheidungen sind „ähnlich weitreichend"). Praktisch erforderlich: repräsentative Fall-Daten, Bias-Audits an Untergruppen, transparente Score-Faktoren, klare Begründung individueller Empfehlungen, menschliche Letztverantwortung, Beschwerdeweg. Eine KI als „Entscheidungs-Werkzeug" ist die Leitplanke; vollautomatische Inobhutnahme ist ausgeschlossen.
Quellen
Amtsblatt der Europäischen Union. Verbindlicher Primärtext des EU AI Act (konsolidierte Fassung).
EU AI OfficeEuropäische Kommission. Zentrale EU-Behörde für AI-Act-Durchsetzung, GPAI-Aufsicht und Leitlinien.
Verordnung (EU) 2023/2854 (Data Act) — EUR-LexAmtsblatt der Europäischen Union. Verbindlicher Primärtext des EU Data Act zur Datenweitergabe an verbundenen Produkten.
Datenschutz-Grundverordnung (DSGVO) — EUR-LexAmtsblatt der Europäischen Union. Verbindlicher Primärtext der DSGVO; maßgeblich für KI-Verarbeitung personenbezogener Daten.
AI Act — konsolidierter Lesetext (ai-act-law.eu)Future of Life Institute / Konsortium. Breit genutzte inoffiziell-konsolidierte, artikelgenaue Darstellung des AI Act.
European Data Protection Supervisor (EDPS)EDPS. EU-Datenschutzaufsicht; Stellungnahmen zum AI Act und Schnittstelle KI/Datenschutz.
European Data Protection Board (EDPB)EDPB. Gremium der EU-Datenschutzbehörden mit Leitlinien zur KI-Verarbeitung.
EU AI PactEuropäische Kommission. Freiwillige Frühumsetzung des AI Act; Indikator für Markterwartungen.
Bundesamt für Sicherheit in der Informationstechnik (BSI)BSI. IT-Sicherheitsbehörde Deutschland; relevant für Cybersecurity-Pflichten des AI Act und CRA/NIS2.
Datenschutzkonferenz (DSK)DSK. Zusammenschluss der deutschen Aufsichtsbehörden; Orientierungshilfen auch zu KI.
Der Bundesbeauftragte für Datenschutz (BfDI)BfDI. Bundesweiter Datenschutzbeauftragter Deutschland.
Rat für Künstliche Intelligenz (Österreich)Bundesministerium AT. Beratendes Gremium und Ministerium für KI-Politik in Österreich.
Eidgenössischer Datenschutz- und Öffentlichkeitsbeauftragter (EDÖB)EDÖB / FDPIC. Schweizer Datenschutzbehörde; Bezug zu EU-KI-Recht für die Schweiz.
Cyber Resilience Act (VO (EU) 2024/2847) — EUR-LexAmtsblatt der Europäischen Union. Schnittstellen-Rechtsakt zur Cybersicherheit von Produkten mit digitalen Elementen (KI-relevant).
Richtlinie (EU) 2022/2555 (NIS2) — EUR-LexAmtsblatt der Europäischen Union. Schnittstellen-Rechtsakt zu IT-Sicherheitsanforderungen für kritische Sektoren.
Häufige Fragen
Ist Jugendhilfe-KI hochriskant?
Ja. Anhang III Nr. 5/6 erfasst Risiko-Scoring und Entscheidungs-Unterstützung in der Kinder-/Jugendhilfe. Volles Pflichtenbündel aus Art. 8–15 ab 2. Aug. 2026.
Muss eine Grundrechts-Folgenabschätzung erstellt werden?
Ja für öffentliche Jugendämter (Art. 27 AI Act i.V.m. Art. 26 Abs. 7): betroffene Personen (Kinder/Familien), spezifische Risiken, Maßnahmen, Aufsicht, Beschwerdeweg.
Welche Bias-Risiken bestehen?
Historische Fall-Daten spiegeln soziale/ethnische Verzerrungen; die KI verstärkt sie (Feedback-Schleife, vgl. APPROACH/Allegheny). Art. 10 verlangt Bias-Prüfung. Vollautomatische Inobhutnahme ist ausgeschlossen.
Rechtskonforme Umsetzung für KI in der Kindeswohl- und Jugendhilfeentscheidung?
Wenn du KI in der Kindeswohl- und Jugendhilfeentscheidung rechtskonform einführen oder prüfen willst, entwickle ich mit dir die passende Compliance-Strategie — von der Risikoklassifizierung bis zum Nachweis.