Zum Hauptinhalt springen
Zurück zum Blog
Individuelle GenAI-Lösungen

KI-Agenten absichern: Werkzeuge, Rechte und Aktionen prüfen

Von Martin Feld · Veröffentlicht am

KI-Agenten absichern: Werkzeuge, Rechte und Aktionen prüfen
#KI-Sicherheit

Wie Unternehmen Agenten mit Werkzeugzugriff vor dem Einsatz auf manipulierte Eingaben, übermäßige Rechte und riskante Aktionen prüfen.


Ein KI-Agent, der nur einen Textentwurf erstellt, hat andere Risiken als ein System, das Dateien lesen, Datensätze ändern oder Nachrichten versenden kann. Sobald ein Modell Werkzeuge aufrufen oder Aktionen auslösen darf, müssen Unternehmen neben der Antwortqualität auch Rechte, Grenzen und Freigaben prüfen. Das OWASP GenAI Security Project veröffentlichte im Dezember 2025 eine eigene Top-10-Übersicht zu Risiken agentischer Anwendungen. Sie bietet einen Sicherheitsrahmen, ist aber keine verbindliche Norm.

Was sich mit Werkzeugzugriff ändert

Ein Agent kann Schritte planen, Daten aus mehreren Quellen abrufen und Werkzeuge in einer Folge nutzen. Damit kann ein Fehler über die einzelne Antwort hinaus Folgen haben: Ein manipulierter Inhalt könnte eine Aktion beeinflussen, ein zu weitreichendes Konto könnte mehr Daten zugänglich machen als nötig oder eine falsch verstandene Anweisung eine unerwünschte Änderung auslösen.

OWASP hebt bei agentischen Anwendungen unter anderem das Hijacking des Agentenverhaltens, den Missbrauch von Werkzeugen und Identitäts- beziehungsweise Berechtigungsrisiken hervor. Die OWASP Top 10 for Agentic Applications for 2026 wurde am 9. Dezember 2025 veröffentlicht und stützt sich laut Projektseite auf eine globale Begutachtung mit mehr als 100 Fachleuten. Nutzen Sie sie als Ausgangspunkt für die eigene Bedrohungsanalyse, nicht als vollständigen Nachweis der Sicherheit.

Werkzeuge und Rechte auf den Zweck begrenzen

Listen Sie für den geplanten Einsatz alle Werkzeuge, Datenquellen und möglichen Aktionen auf. Fragen Sie bei jedem Eintrag: Ist diese Fähigkeit für die Aufgabe erforderlich? Welche Identität wird verwendet? Kann das Werkzeug Daten nur lesen oder auch verändern? Welche Bereiche und Nutzer sind erreichbar?

Vergeben Sie nur die für den konkreten Zweck nötigen Rechte. Trennen Sie möglichst lesende und schreibende Zugriffe und begrenzen Sie den Umfang, auf den ein Agent zugreifen kann. Ein Agent sollte nicht mehr Handlungsspielraum erhalten, nur weil eine Funktion technisch verfügbar ist.

Menschliche Freigabe bei folgenreichen Aktionen

Legen Sie fest, welche Schritte automatisch ausgeführt werden dürfen und wo eine Person bestätigen muss. Eine Freigabe ist besonders zu prüfen, wenn Aktionen externe Empfänger, finanzielle oder rechtliche Folgen, Änderungen an produktiven Daten oder schwer rückgängig zu machende Auswirkungen haben können. Die prüfende Person braucht ausreichend Kontext, um die Aktion beurteilen und ablehnen zu können.

Planen Sie außerdem einen sicheren Abbruch: Wie lässt sich ein Lauf stoppen, ein Zugriff entziehen oder eine fehlerhafte Änderung rückgängig machen? Wer wird informiert? Diese Fragen gehören in den Prozessentwurf und sollten nicht erst nach einem Vorfall beantwortet werden.

Manipulierte Eingaben in Tests einbeziehen

Agenten können Informationen aus Dokumenten, E-Mails, Webseiten oder anderen externen Quellen aufnehmen. Behandeln Sie solche Inhalte als potenziell nicht vertrauenswürdig. Ein Testset sollte daher nicht nur normale Aufgaben enthalten, sondern auch Anweisungen in abgerufenen Inhalten, widersprüchliche Informationen, fehlende Rechte und unerwartete Werkzeugantworten.

Prüfen Sie, ob der Agent bei solchen Fällen sensible Informationen preisgibt, unerlaubte Werkzeuge nutzt oder ohne notwendige Freigabe eine Aktion ausführt. OWASP beschreibt in seiner Orientierung unter anderem Angriffe auf Agentenverhalten und Werkzeugmissbrauch. Die konkreten Schutzmaßnahmen hängen jedoch von Architektur, Modell, Werkzeugen und Einsatzumgebung ab.

Änderungen erneut bewerten

Neue Werkzeuge, Berechtigungen, Modelle, Datenquellen oder Aufgaben können das Risikoprofil verändern. Definieren Sie solche Änderungen als Auslöser für erneute Tests und Freigaben. Dokumentieren Sie dabei die erwarteten Aktionen, verbotenen Aktionen, Prüfergebnisse und offenen Risiken.

Für die übergeordnete Einordnung von Architektur, Kontrolle und Betrieb bietet sich der Beitrag Skalierbare KI im Unternehmen an. Wenn der Agent auf interne Dokumente zugreift, ergänzt RAG-Assistenten für Unternehmenswissen die Betrachtung von Quellen und Abrufrechten. Der Workshop Skalierbare KI-Architektur & Betrieb verstehen behandelt Entscheidungsfragen rund um Kontrolle und Betriebsverantwortung.

Quelle und Recherche-Stand

  • OWASP Top 10 for Agentic Applications for 2026, OWASP GenAI Security Project, veröffentlicht am 9. Dezember 2025. Fachliche Orientierung zu Sicherheitsrisiken autonomer und agentischer Systeme, darunter Angriffe auf Agentenverhalten, Werkzeugmissbrauch und Berechtigungsrisiken.

Recherche-Stand: 8. Oktober 2026. Die OWASP-Übersicht ist eine Community-Sicherheitsressource und keine Norm oder Garantie; die Sicherheitsprüfung muss auf den konkreten Agenten zugeschnitten sein.

Vom Wissen zur Umsetzung

Sie möchten dieses Thema in Ihrem Unternehmen angehen? Wir unterstützen Sie mit maßgeschneiderter Beratung und Umsetzung.

Angebot ansehen
3

Passende Angebote für Weg 3

Individuelle GenAI-Lösungen

KI-Reifegrad- & Datenanalyse
Weg 3 – Individuelle GenAI-Lösungen

KI-Reifegrad- & Datenanalyse

Eigene oder maßgeschneiderte KI-Lösungen bieten große Chancen, sind jedoch mit Aufwand und Investitionen verbunden. Die KI-Reifegrad- & Datenanalyse schafft Klarheit darüber, ob Ihr Unternehmen bereit ist – und welcher Weg realistisch und wirtschaftlich sinnvoll ist.

Maßgeschneiderter KI-Assistent (RAG-basiert)
Weg 3 – Individuelle GenAI-Lösungen

Maßgeschneiderter KI-Assistent (RAG-basiert)

Standard-KI liefert oft allgemeine Antworten. Ein maßgeschneiderter, RAG-basierter KI-Assistent greift gezielt auf Ihr internes Wissen zu und beantwortet Fragen fachlich korrekt, aktuell und nachvollziehbar – exakt auf Ihr Unternehmen zugeschnitten.

Feintuning bestehender KI-Modelle
Weg 3 – Individuelle GenAI-Lösungen

Feintuning bestehender KI-Modelle

Allgemeine KI-Modelle liefern oft gute, aber nicht immer fachlich exakte Ergebnisse. Durch gezieltes Feintuning lassen sich bestehende Modelle an Ihre Terminologie, Inhalte und Prozesse anpassen – für deutlich höhere Qualität und Zuverlässigkeit.

KI-gestützte Entscheidungsunterstützung
Weg 3 – Individuelle GenAI-Lösungen

KI-gestützte Entscheidungsunterstützung

Entscheider stehen täglich vor komplexen Fragestellungen und einer Vielzahl an Informationen. KI-gestützte Entscheidungsunterstützung hilft dabei, relevante Daten zu bündeln, Zusammenhänge aufzuzeigen und fundierte Entscheidungen schneller zu treffen.

Skalierbare KI-Architektur & Betriebsmodell
Weg 3 – Individuelle GenAI-Lösungen

Skalierbare KI-Architektur & Betriebsmodell

Individuelle KI-Lösungen entfalten ihren Wert erst im stabilen Betrieb. Eine skalierbare Architektur und ein klares Betriebsmodell sorgen dafür, dass KI zuverlässig funktioniert, mitwächst und langfristig beherrschbar bleibt.

KI-Governance, AI Act & Compliance
Weg 3 – Individuelle GenAI-Lösungen

KI-Governance, AI Act & Compliance

Mit zunehmendem Einsatz von Künstlicher Intelligenz steigen die regulatorischen Anforderungen. Eine klare KI-Governance und die frühzeitige Auseinandersetzung mit dem EU AI Act schaffen Rechtssicherheit, Vertrauen und langfristige Handlungsfähigkeit.

Strategische KI-Roadmap
Weg 3 – Individuelle GenAI-Lösungen

Strategische KI-Roadmap

Einzelne KI-Projekte entfalten ihren vollen Wert erst dann, wenn sie Teil einer übergeordneten Strategie sind. Eine strategische KI-Roadmap verbindet Technologie, Prozesse und Unternehmensziele zu einem klaren, umsetzbaren Gesamtbild.

3

Weitere Artikel zu Weg 3

Individuelle GenAI-Lösungen