Governance und Sicherheit als Treiber für die Einführung agentischer KI

Wie Governance und Sicherheit die Einführung agentischer KI vorantreiben können

Die Einführung agentischer KI-Technologie in Unternehmen birgt sowohl große Chancen als auch Risiken. Agentische KI bezieht sich auf KI-Agenten, die Entscheidungen treffen, andere Software-Tools nutzen und autonom mit kritischen Systemen interagieren können. Diese Technologie kann erhebliche Produktivitätsgewinne ermöglichen, wenn die richtigen Governance- und Sicherheitsmaßnahmen getroffen werden.

Die Herausforderung der „Schatten“-Risiken

Ein bekanntes Problem für Technologie-Executives sind die sogenannten Schattenrisiken. Diese beziehen sich auf Vermögenswerte oder Anwendungen, die außerhalb des Sichtfeldes der IT liegen. Im Laufe der Jahre haben Daten- und Sicherheitsfachleute versucht, „Schatten-Daten“ zu finden und zu schützen, also sensible Geschäftsinformationen, die außerhalb des formalen Datenmanagementsystems gespeichert sind.

Kürzlich haben IT-Profis auch mit dem Phänomen „Schatten-KI“ zu kämpfen, das sich auf nicht genehmigte KI-Anwendungen innerhalb der IT-Systeme eines Unternehmens bezieht. Nun steht ein neues Schattenrisiko auf der Agenda: Schatten-KI-Agenten.

Die Vorteile von agentischen KI-Agenten

Die Autonomie von KI-Agenten ist ein entscheidendes Verkaufsargument. Ihre Fähigkeit, Ziele zu verfolgen und komplexe Aufgaben zu lösen, kann zeitaufwändige Aufgaben, die früher menschliche Intervention erforderten, erheblich beschleunigen. Beispielsweise können IT-Probleme schneller gelöst oder HR-Workflows effizienter geleitet werden.

Ein weiterer Vorteil ist die Zugänglichkeit dieser Tools. Dank fortschrittlicher natürlicher Sprachverarbeitung können zahlreiche Mitarbeiter – nicht nur Softwareentwickler und Ingenieure – KI-Agenten für neue Anwendungsfälle oder Arbeitsabläufe einsetzen.

Risiken der Autonomie und Zugänglichkeit

Allerdings kann diese Autonomie auch Risiken mit sich bringen, wenn sie nicht mit den richtigen Governance- und Sicherheitsmaßnahmen kombiniert wird. Da ein breiteres Spektrum von Mitarbeitern KI-Agenten nutzen kann, steigt die Wahrscheinlichkeit, dass diese Tools ohne Genehmigung oder angemessene Schulung eingesetzt werden.

Bereits jetzt erleben Unternehmen Probleme mit KI-Assistenten und Chatbots, wenn Mitarbeiter wichtige Unternehmensdaten in nicht genehmigte, Drittanbieter-Tools eingeben, was zu Datenlecks oder -diebstahl führen kann.

Da KI-Agenten unbeaufsichtigt innerhalb kritischer Infrastrukturen agieren können, erhöht sich das Risiko von schattierten Konfigurationen. Diese Agenten sind anfällig für die gleichen Probleme wie andere KI-Systeme, wie Halluzinationen, Voreingenommenheit und Abdrift.

Kontrolle gewinnen

Wenn Schatten-Daten und traditionelle Schatten-KI-Probleme auftauchten, hielten Unternehmen die Innovation nicht an, sondern passten sich an. Diese Strategie sollte auch in der aktuellen Ära verfolgt werden.

Der erste Schritt zur Beseitigung von Schatten besteht darin, Licht zu bringen. IT-Profis benötigen umfassende Sichtbarkeit in die KI-Agenten in ihrer Umgebung. Governance- und Sicherheitswerkzeuge für KI können automatisch nach KI-Anwendungen suchen und diese katalogisieren.

Nach der Entdeckung müssen die Agenten ins Inventar aufgenommen, einem Anwendungsfall zugeordnet und in den Governance-Prozess integriert werden. Risikobewertungen, Compliance-Bewertungen sowie geeignete Kontrollen und Regelungen sind wesentliche Bestandteile der KI-Governance, um Risiken zu mindern.

Unternehmen sollten auch die Aktionen ihrer Agenten nachverfolgbar und erklärbar machen. Vorab festgelegte Schwellenwerte für Toxizität und Voreingenommenheit sollten gesetzt werden. Außerdem müssen die Ausgaben der Agenten auf kontextuelle Relevanz, Treue der Abfragen und Qualität der Tool-Auswahl überwacht werden.

Der Kern dieser Strategie ist die tiefgreifende Integration von KI-Sicherheit und -Governance als eng verbundene Disziplinen. Diese Zusammenarbeit muss sowohl auf Software- als auch auf Personalebene stattfinden: KI-Entwickler und Sicherheitsfachleute sollten frühzeitig und häufig miteinander kommunizieren.

More Insights

Vertrauen und Risiko im Zeitalter der KI

Für Vermarkter verspricht KI einen Sprung in der Produktivität – aber nur, wenn sie durch eine klare Strategie und menschliche Aufsicht geleitet wird. Die Frage ist nicht, ob man KI nutzen sollte...

Cloud Governance für die KI-Zukunft

In der heutigen Zeit, in der KI-Innovationen sprießen, wird oft übersehen, dass veraltete Cloud-Governance-Modelle ein kritisches Risiko darstellen. Diese Modelle sind nicht für die Geschwindigkeit...

Leitfaden zur verantwortungsvollen KI-Governance für Unternehmensvorstände

Mit der zunehmenden Bedeutung von Künstlicher Intelligenz (KI) in modernen Unternehmen hat die Confederation of Indian Industry (CII) am Sonntag ein neues Handbuch veröffentlicht, um...

KI-gestützte DevSecOps: Automatisierung, Risiken und Compliance im Zero-Trust-Umfeld

Die rasante Einführung von KI-gestützter Automatisierung im DevSecOps kann sowohl Chancen als auch Herausforderungen mit sich bringen. Während KI die Effizienz steigert, birgt sie auch das Risiko...

Ein Zentrum für KI, Recht und Regulierung in Indien

In einer wegweisenden Entwicklung haben Cyril Amarchand Mangaldas, Cyril Shroff und die O.P. Jindal Global University die Gründung des Cyril Shroff Centre for AI, Law & Regulation am Jindal Global Law...

Darwin präsentiert kostenlosen Policy-Wizard zur Vereinfachung der KI-Governance für Behörden

Darwin hat den AI Policy Wizard eingeführt, ein kostenloses und interaktives Tool, das lokalen Regierungen und öffentlichen Einrichtungen hilft, praktische, konforme und maßgeschneiderte...

Vertrauen in KI durch verantwortungsvolle Governance stärken

Unklare Bedrohungen und unvorhersehbares Verhalten erschweren das globale Vertrauen in KI. Der Aufbau eines gemeinsamen Verständnisses durch anpassbare Governance hilft, konsistente Erwartungen für...

Kultur als Schlüssel zu vertrauenswürdiger KI

In diesem Bericht wird die Bedeutung einer inklusiven KI-Governance hervorgehoben, um sicherzustellen, dass auch übersehene Stimmen im Globalen Süden an der Diskussion und Entscheidungsfindung über...

Die EU AI-Verordnung und die Einhaltung des Urheberrechts

Ein zentrales Problem beim Training generativer KI-Modelle ist die Einhaltung der Urheberrechtsgesetze. Das EU-AI-Gesetz verstärkt die Notwendigkeit der Urheberrechtskonformität, insbesondere in Bezug...