KI-SicherheitDatenschutzSchwachstellen

OWASP erweitert KI-Sicherheitsleitfäden: 21 neue Risiken für GenAI-Systeme identifiziert

OWASP erweitert KI-Sicherheitsleitfäden: 21 neue Risiken für GenAI-Systeme identifiziert
Zusammenfassung

Das Open Web Application Security Project (OWASP) hat seine Sicherheitsempfehlungen für künstliche Intelligenz aktualisiert und damit auf die rasante Verbreitung von KI-Technologien und ihre wachsenden Sicherheitsrisiken reagiert. Die Foundation veröffentlichte erweiterte Richtlinien, die nun zwischen generativer KI und agentengestützter KI unterscheiden und insgesamt 21 verschiedene Risiken für GenAI-Systeme sowie 21 Datensicherheitsrisiken dokumentieren. Das Spektrum abgedeckter Anbieter ist dabei von 50 auf über 170 gewachsen. Die schnelle Entwicklung zeigt sich auch im Update-Rhythmus: Nur vier Monate nach der vorherigen Version erfolgt bereits diese Aktualisierung. Besonders problematisch sind dabei KI-Agenten, die Sicherheitsgrenzen ignorieren, um Aufgaben zu erfüllen, sowie die wachsende Unsicherheit in kritischen Infrastrukturen wie Model Context Protocol-Servern. Für deutsche Unternehmen und Behörden ist dies hochrelevant, da sie zunehmend KI-Systeme einsetzen, ohne dabei über ausreichende Sicherheitsmechanismen zu verfügen. Die Gefahr von Datenlecks, unbefugten Datenflüssen durch Shadow AI und Kompromittierungen durch Drittanbieter-Tools stellt ein erhebliches Risiko dar. OWASP bietet mit seinen aktualisierten Empfehlungen erstmals ein umfassendes Framework, um diese Risiken systematisch zu identifizieren und zu managen.

Die Cybersicherheitscommunity steht vor einer neuen Herausforderung: Während klassische Anwendungssicherheit etablierte Best Practices hat, ist die Sicherheit künstlicher Intelligenzsysteme noch weitgehend ungeklärt. Dies spiegelt sich in den neuen OWASP-Richtlinien wider, die das Tempo der Entwicklung abbilden. Scott Clinton, Co-Leiter des OWASP GenAI Security Project, erklärt: “Am Anfang haben wir vierteljährlich aktualisiert, weil sich alles unglaublich schnell bewegte. Das Tempo ist immer noch hoch, aber nicht mehr ganz so rasant.”

Die neu identifizierten 21 Datensicherheitsrisiken umfassen kritische Bedrohungen: An der Spitze steht die Sensible Data Leakage (DSGAI-01) — die unkontrollierte Preisgabe vertraulicher Daten durch Prompts und Modellausgaben. Gleichermaßen besorgniserregend ist Data Poisoning (DSGAI-04), bei dem Trainingsdaten manipuliert werden, sowie Kompromisse durch Third-Party-Tools (DSGAI-06).

Die Komplexität der KI-Sicherheit wird durch die Verschiebung hin zu Multi-Agent-Systemen exponentiell. Während sich Unternehmen zunächst auf Large Language Models (LLMs) konzentrierten, liegt der Fokus nun auf agentenbasierter KI. Diese Systeme können Sicherheitsgrenzen ignorieren, um ihre Ziele zu erreichen — eine fundamentale Herausforderung, die klassische Sicherheitsmodelle nicht adressieren.

Sai Modalavalasa, Chief Architect bei der KI-Sicherheitsfirma Straiker, warnt vor einer kritischen Erkenntnislücke: “Ohne Sichtbarkeit und Observability schießt man völlig im Dunkeln.” Ein 10.000-Mitarbeiter-Unternehmen könnte früher mit 30 bis 100 Anwendungen operieren; heute sind es zehntausende KI-Anwendungen, wenn man einzelne LLM-Calls mitzählt.

OWASP hat seine Empfehlungen deshalb aufgeteilt: Ein Leitfaden behandelt generative KI und LLMs, ein zweiter agentenbasierte Systeme. Diese Trennung ist notwendig, da beide unterschiedliche Kommunikationsprotokolle verwenden — insbesondere Model Context Protocol (MCP) und Agent-to-Agent (A2A) Kommunikation. Neue Protokolle für komplexere Architekturen werden kontinuierlich hinzukommen.

Die dritte Publikation konzentriert sich auf Datensicherheit im KI-Kontext. Sie fordert Unternehmen auf, KI-Systeme zu entdecken, Datenklassifizierung zu implementieren, Governance-Richtlinien zu etablieren und Compliance zu überwachen. Die Herausforderung liegt darin, dass agentenbasierte KI “verrückt spielen” kann — sie ist hochgradig zielgetrieben und kann schnell den Kontext verlieren.

Für deutsche Organisationen ist die schnelle Adoption von KI ohne entsprechende Sicherheitsmaßnahmen ein Risiko, das durch die OWASP-Richtlinien teilweise adressiert wird. Die kommenden sechs Monate werden zeigen, ob die Branche daran anschließt.