Speak to a rep about your business needs
See our product support options
Allgemeine Anfragen und Standorte
KontaktWir verwenden KI-Tools, um unsere Inhalte in mehreren Sprachen bereitzustellen. Da diese Übersetzungen automatisiert sind, kann es zu Abweichungen zwischen der englischen und der übersetzten Version kommen. Die englische Version dieser Inhalte ist die offizielle Version. Kontaktieren Sie BMC, um mit einem Experten zu sprechen, der Ihre Fragen beantworten kann.
Weiterleitung…
Basierend auf den Einstellungen Ihres Browsers haben wir festgestellt, dass Sie diese Website möglicherweise lieber in einer anderen Sprache ansehen möchten.
Wir verwenden KI-Tools, um unsere Inhalte in mehreren Sprachen bereitzustellen. Da diese Übersetzungen automatisiert sind, kann es zu Abweichungen zwischen der englischen und der übersetzten Version kommen. Die englische Version dieser Inhalte ist die offizielle Version. Kontaktieren Sie BMC, um mit einem Experten zu sprechen, der Ihre Fragen beantworten kann.
Ausführungsschutzmechanismen für KI-Agenten
Das Problem sind nicht die Entscheidungen der Agenten. Es ist Agenten-Zugang zur Hinrichtung.
Es geht hier nicht darum, Agenten im üblichen Sinne sicherer zu machen.
Das KI-Agentenrisiko hat zwei Ebenen:
Dieser Leitfaden konzentriert sich auf das Ausführungsrisiko. Es geht nicht um Prompt-Engineering, Modellausrichtung oder Output-Filterung. Diese Kontrollen sind wichtig, aber die schwerwiegendsten operativen Vorfälle beginnen, wenn ein Agent eine Aktion ausführen darf, die eigentlich nicht hätte ausgeführt werden dürfen.
Sobald ein Agent Workflows auslösen, Jobs initiieren, Systeme modifizieren oder nachgelagerte Prozesse orchestrieren kann, ist die Frage: "Was darf ausgeführt werden, unter welchen Bedingungen und wo wird diese Kontrolle durchgesetzt?"
In dem Moment, in dem ein KI-Agent handeln kann, wird der Zugriff zu einem Problem der Ausführung der Kontrolle. Hier kommen die Absperrungen für Hinrichtungen ins Spiel.
Execution Guardrails sind Kontrollmechanismen, die bestimmen, ob die von einem KI-Agenten angeforderte Aktion in der Produktion ausgeführt werden darf. Bevor irgendetwas ausgeführt wird, überprüfen diese Kontrollen Identität, Umfang, Genehmigungen, Abhängigkeiten, Timing und operative Richtlinien über einen Workflow, Job, API-gesteuerten Schritt oder Systemänderung.
Diese Kontrollen gehören zwischen der Absicht des Agenten und der Ausführung, nicht innerhalb des Agenten selbst. Sie bestimmen nicht, was der Agent verlangt. Sie bestimmen, was erlaubt ist. In der Praxis bedeutet das, die vom Agent initiierte Ausführung über eine Kontrollebene zu routen – den zentralen Punkt, an dem Ausführungsanfragen vor Beginn der nachgelagerten Arbeit mit der Richtlinie bewertet werden.
Ohne einen einheitlichen Durchsetzungspunkt müssen nachgelagerte Systeme ihre eigenen Regeln anwenden oder gar keine Regeln anwenden, was Möglichkeiten für unautorisierte Aktionen, inkonsistente Genehmigungen und Richtlinienabweichungen schafft.
Bevor ein System jedoch eine Ausführungsanfrage bewerten kann, muss es zunächst eine grundlegende Frage beantworten: Wer oder was stellt die Anfrage?
Die Ausführungskontrolle beginnt mit der Identität. Ohne eine eindeutige, kontrollierte und zuschreibbare Identität können die Anfragen eines Agenten nicht mit Richtlinien bewertet, mit genehmigten Berechtigungen verknüpft oder über die Ausführungshistorie zurückverfolgt werden.
Eine der schnellsten Möglichkeiten, die Ausführungskontrolle zu schwächen, ist die Nutzung gemeinsamer Zugangsdaten. Wenn mehrere Agenten dieselben Konten, API-Schlüssel oder Service-Identitäten verwenden, ist es schwierig festzustellen, wer eine Aktion initiiert hat, welche Berechtigungen beabsichtigt waren und ob der Zugriff angemessen begrenzt war.
Um agentengesteuerte Ausführung sicher zu autorisieren, sollten Identität und Berechtigungen geregelt, zugeordnet und eingeschränkt sein.
Agenten senden Ausführungsanfragen über eine Kontrollebene mit genehmigten Identitäten und Berechtigungen. Der Zugriff ist auf autorisierte Arbeitsabläufe und Dienste begrenzt, und Ausführungsanfragen werden vor der Arbeit anhand etablierter Richtlinien bewertet.
Dadurch bleiben Aktionen zuordnbar, der Zugriff bleibt innerhalb definierter Grenzen und die Ausführungssteuerung kann konsistent angewendet werden.
Die Identität sagt dir, wer die Anfrage stellt. Abhören verwandelt diese Genehmigung in Durchsetzung.
In der Produktion sollten Agenten Ausführungsanfragen über eine kontrollierte Schnittstelle senden – zum Beispiel eine MCP-basierte Schnittstelle wie den Control-M MCP Server – anstatt Skripte, Jobs oder operative APIs direkt aufzurufen.
Diese Schnittstelle leitet Anfragen für orchestrierte Arbeitslasten an die Kontrollebene, wo sie vor der genehmigten Arbeit gegen Richtlinien ausgewertet werden können. Das unterscheidet sich davon, zu versuchen, jede beliebige API zu steuern, die ein Agent erreichen könnte. Das Ziel ist es, die wichtigsten Ausführungspfade abzufangen und zu kontrollieren: die Workflows, Jobs und nachgelagerten operativen Prozesse, die durch die Kontrollebene geleitet werden.
Praktisch sieht die Durchsetzung folgendermaßen aus:
Jede kontrollierte Ausführungsanfrage sollte diesem Weg folgen, sodass Richtlinien konsistent durchgesetzt werden können, anstatt sich darauf zu verlassen, dass einzelne Tools, Arbeitsabläufe oder Anwendungen ihre eigenen Kontrollen unabhängig anwenden.
Abfang ist der Kontrollpunkt. Die acht untenstehenden Leitplanken definieren, was bewertet werden muss, bevor eine Aktion ausgeführt werden kann. Wenn einer von ihnen fehlt, können die Agenten einen Weg finden, um Richtlinien, Genehmigungen oder operative Schutzmaßnahmen herumzugehen.
| Guardrail | Question | What to Control | Why it Matters |
|---|---|---|---|
|
Identity |
Who's executing this? |
Governed execution identities, scoped permissions, and no anonymous execution |
Each action can be tied back to a specific identity and permission set |
|
Scope |
What's the agent allowed to touch? |
Approved jobs, workflows, environments, and executable assets |
Agents stay within defined boundaries instead of drifting into unintended systems or workflows |
|
Delegation |
Can permissions expand through handoffs? |
Authorization context, policy checks, and routing for consequential downstream actions |
Permissions are less likely to expand unexpectedly as work moves between agents or services, especially when each consequential action is routed the control plane for independent evaluation |
|
Approval |
Which actions require human sign-off? |
Workflow-enforced approval gates for sensitive or high-impact actions |
Critical actions can be paused for review before execution. If interactive approval is part of the experience, the exact elicitation pattern may depend on the client or interface used to submit the request |
|
Rate, Timing & SLA |
Does execution exceed safe limits or violate operating constraints? |
Workload throttling, concurrency controls, execution windows, retry limits, and SLA-aware scheduling |
Helps prevent retry storms, runaway execution, resource contention, and avoidable SLA risk |
|
Readiness |
Should this run at all? |
Dependencies, data availability, and execution prerequisites |
Work runs only when required conditions have been met |
|
Rollback & Recovery |
How do you recover safely when an AI-triggered action fails? |
Recovery workflows, retries, and compensating actions |
Failures are more likely to remain contained and recoverable rather than cascading across systems |
|
Traceability |
Can you prove what happened? |
Logs, approvals, execution history, and workflow lineage |
Teams can reconstruct what happened, how it happened, and why |
Falls dir das bekannt vorkommt, hast du es wahrscheinlich mit einem Problem der Ausführungssteuerung und nicht mit einer KI zu tun.
01
Warning signs:
What it means: Execution is based on implementation, not policy.
02
Warning signs:
What it means: Access is difficult to control and actions become difficult to trace.
03
Warning signs:
What it means: Control depends on people remembering the process instead of the system enforcing it.
04
Warning signs:
What it means: Small failures can escalate into resource contention, workflow storms, and operational incidents.
05
Warning signs:
What it means: The system can explain what happened after the fact, but it can't stop unsafe actions before they run.
Es ist relativ einfach, Ausführungsrichtlinien zu definieren. Die Herausforderung besteht darin, sicherzustellen, dass sie überall durchgesetzt werden, wo Arbeiten stattfinden können. Mit wachsender Umgebungen breitet sich die Ausführung auf mehr Systeme, Dienste und Automatisierungstools aus, und nicht alle werden auf die gleiche Weise gesteuert.
Hier beginnt die Kontrolle auseinanderzufallen:
Es wird noch schwieriger, sicherzustellen, dass jeder Ausführungspfad denselben Kontrollen unterliegt, wenn die Ausführung auf mehrere koordinierende Agenten verteilt ist.
In einem Einzelagentenmodell ist die Ausführung relativ unkompliziert: Ein Agent stellt eine Anfrage, die Anfrage wird bewertet und eine Entscheidung getroffen.
In Multi-Agenten-Systemen können Agenten Arbeit delegieren, Kontext austauschen und nachgelagerte Aktionen auslösen, wodurch eine einzelne Ausführungsentscheidung in eine Kette von Ausführungsentscheidungen umgewandelt wird. Infolgedessen gilt:
Multi-Agenten-Systeme benötigen keine neuen Leitplanken. Sie erfordern, dass dieselben Leitplanken bei jedem folgenschweren Ausführungsschritt konsequent angewendet werden.
In der Praxis bedeutet das, nachgelagerte Aktionen zurück durch die Ausführungssteuerungsebene zu routen, um eine unabhängige Bewertung zu erhalten. Vertrauen, das in einem Schritt aufgebaut wurde, kann nicht automatisch weitergeführt werden.
Die Ausführung bleibt kontrolliert, selbst wenn die Koordination zunimmt. Berechtigungen bleiben begrenzt, Genehmigungen gelten, wo Risiko besteht, und jede Aktion bleibt zuordnbar, während sie durch die Kontrollebene fließt.
Viele Teams beginnen mit KI-Leitplanken, die aber oft auf das Verhalten der Agenten statt auf die Ausführung angewendet werden.
Häufige Beispiele sind:
Jeder Ansatz versucht, das zu beeinflussen, was der Agent tut. Keine garantiert Kontrolle darüber, was der Agent ausführen darf.
Teams wechseln nicht direkt von KI-Piloten zu produktionsbereiten autonomen Agenten. Sie bewegen sich von der Gewährung von Agenten zu Kontrolle darüber, was dieser Zugriff ausführen kann.
Nutzen Sie das untenstehende Modell, um zu sehen, wo Ihre Architektur steht.
Level 1
Level 2
Level 3
Level 4
Level 5
Die meisten Organisationen, die mit KI-Agenten experimentieren, arbeiten zwischen Level 1 und Level 3. Produktionsbereite KI-Operationen beginnen typischerweise auf Level 4, wo die orchestrierte Ausführung über eine gemeinsame Steuerebene abgefangen wird. Der Übergang von Level 3 zu Level 4 ist der Moment, an dem viele KI-Initiativen von Experimenten zur Produktionssteuerung der Ausführung wechseln.
Lassen Sie uns ein reales Szenario erkunden, um alles zusammenzuführen.
Es ist Monatsschluss. Ein Finanzabstimmungs-Workflow scheiterte, weil ein vorgelagerter Datenfeed zu spät eintraf, und die erforderlichen Transaktionsdaten sind unvollständig. Ein KI-Betriebsagent ist damit beauftragt, fehlgeschlagene Aufträge zu untersuchen und festgefahrene Arbeitsabläufe automatisch wiederherzustellen.
Der Agent entscheidet, dass der Abstimmungsprozess erneut ausgeführt werden soll, und generiert eine Ausführungsanfrage. Was als Nächstes passiert, hängt davon ab, ob es Hinrichtungsschutzmechanismen gibt oder nicht.
The agent reruns the workflow directly:
Result: What started as a delayed data feed becomes a broader operational incident. Reconciliation results are inaccurate because required transactions weren’t available when processing occurred. Invalid outputs propagate across dependent systems, teams have to manually identify and correct downstream impacts, and recovery is significantly more complex than the original problem.
The same execution request is intercepted before anything runs:
Result: The workflow doesn’t execute under unsafe conditions. The issue is contained at the point of execution, preventing downstream reporting errors while preserving a clear, controlled path to recovery.
Ja, wenn Hochwirkungsaktionen mit nachgeschalteten Folgen durch eine gemeinsame Steuerebene geleitet werden. Je mehr Ausführungspfade durch diese Steuerebene fließen, desto konsequenter können Leitplanken durchgesetzt werden.
An diesem Punkt stellt sich eine offensichtliche Frage: "Wenn ich bereits ein API-Gateway oder Service-Mesh habe, habe ich dann nicht schon eine Kontrollebene?"
Die meisten Umgebungen verfügen über API-Gateways, IAM-Systeme, Rate-Limiting und Service-Mesh-Steuerungen. Diese Steuerungen sind wichtig. Sie lösen einfach ein anderes Problem.
API-Gateways und Service Mesh beantworten die Frage: "Kann diese Anfrage diesen Dienst erreichen?" Ausführungssteuerungen beantworten eine andere Frage: "Sollte diese Aktion überhaupt ausgeführt werden?"
API-Gateways und Service Mesh sind nicht darauf ausgelegt, zu bewerten, ob ein Workflow, Auftrag oder eine operative Aktion basierend auf Abhängigkeiten, Genehmigungen, Geschäftsrisiken oder Wiederherstellungsanforderungen ausgeführt werden soll.
Und sie setzen Entscheidungen wie:
Eine Steuerebene trifft Entscheidungen auf einer anderen Ebene:
KI-Agenten rufen nicht einfach APIs auf. Sie können Aktionen dynamisch auswählen, Workflows miteinander verknüpfen und die Ausführung basierend auf generierten Plänen auslösen.
Ohne Ausführungsebene-Kontrollen ist jede API oder jeder Ausführungspfad, den der Agent erreichen kann, effektiv "erlaubt". Risikoentscheidungen treffen implizit im Code und in der Konfiguration und nicht explizit durch die Richtlinien.
Es gibt keinen Kontrollpunkt zwischen Absicht und Ausführung.
Im Verlauf dieses Leitfadens sind wir auf dieselbe Idee zurückgekommen: Agentenzugriff ist nicht dasselbe wie Ausführungskontrolle. Der Agent Access bestimmt, welche Systeme ein Agent erreichen kann. Die Ausführungskontrolle bestimmt, ob eine bestimmte Aktion, unter welchen Bedingungen und mit welcher Verantwortung ausgeführt werden soll. Eine Ausführungskontrollebene ist das, was Zugriff in kontrollierte Ausführung verwandelt.
Teams, die bereits Control-M nutzen, können Agentenausführungsanfragen über den Control-M MCP Server (derzeit eine Vorschaufunktion) routen, während Control-M Authentifizierung, rollenbasierte Berechtigungen, Workflow-Bedingungen und Ausführungsrichtlinien bereits zum Zeitpunkt der Ausführung anwendet.
Control-M baut den Agenten nicht. Es wendet die Ausführungskontrolle auf das an, was der Agent ausführen darf. Das bedeutet, dass Agenten mit Jobs und Workflows über eine kontrollierte Schnittstelle interagieren können, jedoch nur innerhalb des Bereichs, den ihre bestehenden Berechtigungen erlauben, und nur, wenn die Ausführung über Control-M geleitet wird.
Anstatt dass Agenten Skripte oder APIs direkt aufrufen, sieht der Ablauf folgendermaßen aus: Der Agent fordert die Ausführung an → Control-M bewertet Berechtigungen, Workflow-Bedingungen, Genehmigungen und Richtlinienbeschränkungen → Autorisierte Arbeit ausgeführt wird
Für risikoreichere Schritte können native Control-M-Genehmigungsworkflows vor der Ausführung eine menschliche Abstimmung erfordern. Interaktive Bestätigung kann eine weitere Kontrolle hinzufügen, wenn der Client sie unterstützt, aber Workflow-Genehmigungsworkflows bleiben der zuverlässigere Kontrollpunkt.
An dieser Stelle lohnt es sich, eine wichtige Unterscheidung zu treffen: Die Ausführung zu beobachten ist nicht dasselbe wie sie zu kontrollieren.
Überwachung ist Detektivkontrolle. Hinrichtungsleitplanken sind präventive Kontrolle. Bis das Monitoring Sie alarmiert, ist die Aktion bereits ausgeführt und jeder Effekt ist bereits in Bewegung.
Das mag in der Entwicklung akzeptabel sein, nicht in der Produktion.
Production systems don’t assume agents will make the right decision every time. They enforce the conditions under which actions are allowed to run, regardless of what the agent can access or request. Every request is intercepted. Every request is evaluated. Nothing runs without enforcement.
Anything less is control by assumption.
Kreuze das Kästchen an, wenn du sagen kannst: "Ja, wir haben alles abgedeckt."
Ihre Punktzahl:
Press Release
Consultation
Diskutieren Sie Ihre Architektur, Integrationen und Workflow-Abhängigkeiten, um zu sehen, wie Control-M in Ihre Umgebung passt.
Danke, dass du dich gemeldet hast. Einer unserer Experten wird Sie in Kürze kontaktieren.
Schließt in 3 Sekunden...