OpenAI stärkt die Sicherheit von ChatGPT gegen Prompt-Injection
OpenAI hat zwei neue erweiterte Sicherheitsfunktionen für ChatGPT eingeführt, um der zunehmenden Bedrohung durch Prompt-Injection-Angriffe entgegenzuwirken, die auftreten, wenn KI-Systeme mit Websites und externen Anwendungen interagieren. Diese Angriffe können es böswilligen Akteuren ermöglichen, die KI dazu zu manipulieren, schädliche Aktionen auszuführen oder vertrauliche Daten offenzulegen. Beide neuen Funktionen verstärken die bestehenden Schutzmaßnahmen der Plattform, darunter die Sandbox-Umgebung, den Schutz vor Datenlecks bei URLs und andere mehrschichtige Sicherheitsprotokolle.

Die erste Funktion ist der Lockdown-Modus, eine optionale, erweiterte Einstellung, die eher für Nutzer mit strengen Sicherheitsanforderungen als für den Durchschnittsnutzer konzipiert ist. Sie senkt das Risiko von Datenlecks erheblich, indem sie strenge Kontrollen darüber auferlegt, wie ChatGPT mit externen Systemen kommuniziert. Dieser Modus deaktiviert oder schränkt proaktiv Tools ein, die potenzielle Angriffsvektoren darstellen. So greift die Webbrowser-Funktion beispielsweise nur auf zwischengespeicherte Inhalte zu, und Funktionen ohne robuste Sicherheitsgarantien werden vollständig deaktiviert.
Derzeit ist dieser Modus für die Editionen ChatGPT Enterprise, Education, Healthcare und Teacher verfügbar. Administratoren können ihn aktivieren, indem sie in den Dashboard-Einstellungen spezifische Rollen erstellen, wo sie auch genau festlegen können, welche externen Anwendungen und Aktionen zulässig sind, während der Lockdown-Modus aktiv ist. OpenAI plant, diesen Modus in den kommenden Monaten auch für Privatanwender verfügbar zu machen. Darüber hinaus unterstützt die Compliance API Logs Platform Administratoren bei der Durchführung von behördlichen Audits zur Anwendungsnutzung und zu Praktiken der Datenfreigabe.
Die zweite Maßnahme besteht darin, Funktionen mit höherem Risiko innerhalb von ChatGPT, ChatGPT Atlas und Codex konsequent mit dem Label **„Elevated Risk“** zu kennzeichnen und so die Art und Weise zu standardisieren, wie potenzielle Bedrohungen den Nutzern mitgeteilt werden.
OpenAI erklärte, dass bestimmte mit dem Internet verbundene Funktionen zwar die Nützlichkeit der KI erhöhen, aber dennoch Risiken bergen, die durch die derzeitigen Sicherheitsvorkehrungen der Branche nicht vollständig gemindert werden können. Diese Kennzeichnung bietet einen klaren Einblick in diese Risiken und ermöglicht es den Nutzern, fundierte Entscheidungen darüber zu treffen, ob sie die Funktionen nutzen möchten, insbesondere in Situationen, in denen sensible Informationen im Spiel sind. Wenn Entwickler beispielsweise den Internetzugang für Codex aktivieren, erscheint die Kennzeichnung auf der Benutzeroberfläche und beschreibt die damit verbundenen Änderungen, potenzielle Gefahren, geeignete Anwendungsfälle sowie Empfehlungen zur Risikominderung.
Verwandter Artikel
U.S.-Aktien erreichen historischen Meilenstein, während KI- und Luft- und Raumfahrtriesen auf ihr Debüt als Billionen-Dollar-Unternehmen vorbereiten
Elon Musk, Sam Altman und Dario Amodei, drei Giganten des Technologiesektors, schreiten den Börsengängen ihrer jeweiligen Unternehmen voran. Mit SpaceX, OpenAI und Anthropic – drei Branchenriesen, die einer Bewertung von einer Billion US-Dollar nahek
Schwedisches KI-Startup Lovable Eyes: Bewertung von 13,2 Milliarden US-Dollar nach großer Finanzierungsrunde
Während KI-gestützte Coding-Tools an Popularität gewinnen, hat das schwedische Startup Lovable eine bedeutende Finanzierungsrunde abgeschlossen. Das Unternehmen strebt danach, 3 Milliarden US-Dollar einzusammeln, was seine Bewertung potenziell auf 13
Google testet den Remy AI Agent für Gemini, da der Fokus auf die Benutzerkontrolle verlagert wird
Laut Business Insider testet Google Remy, einen neuen KI-Personalagenten für Gemini. Dieses Tool soll Aufgaben im Auftrag von Nutzern ausführen und sowohl professionelle Arbeitsabläufe als auch tägliche Routinen optimieren.Derzeit wird Remy in einer
Empfehlungen zu verwandten Spezialthemen
Kommentare (0)
OpenAI hat zwei neue erweiterte Sicherheitsfunktionen für ChatGPT eingeführt, um der zunehmenden Bedrohung durch Prompt-Injection-Angriffe entgegenzuwirken, die auftreten, wenn KI-Systeme mit Websites und externen Anwendungen interagieren. Diese Angriffe können es böswilligen Akteuren ermöglichen, die KI dazu zu manipulieren, schädliche Aktionen auszuführen oder vertrauliche Daten offenzulegen. Beide neuen Funktionen verstärken die bestehenden Schutzmaßnahmen der Plattform, darunter die Sandbox-Umgebung, den Schutz vor Datenlecks bei URLs und andere mehrschichtige Sicherheitsprotokolle.

Die erste Funktion ist der Lockdown-Modus, eine optionale, erweiterte Einstellung, die eher für Nutzer mit strengen Sicherheitsanforderungen als für den Durchschnittsnutzer konzipiert ist. Sie senkt das Risiko von Datenlecks erheblich, indem sie strenge Kontrollen darüber auferlegt, wie ChatGPT mit externen Systemen kommuniziert. Dieser Modus deaktiviert oder schränkt proaktiv Tools ein, die potenzielle Angriffsvektoren darstellen. So greift die Webbrowser-Funktion beispielsweise nur auf zwischengespeicherte Inhalte zu, und Funktionen ohne robuste Sicherheitsgarantien werden vollständig deaktiviert.
Derzeit ist dieser Modus für die Editionen ChatGPT Enterprise, Education, Healthcare und Teacher verfügbar. Administratoren können ihn aktivieren, indem sie in den Dashboard-Einstellungen spezifische Rollen erstellen, wo sie auch genau festlegen können, welche externen Anwendungen und Aktionen zulässig sind, während der Lockdown-Modus aktiv ist. OpenAI plant, diesen Modus in den kommenden Monaten auch für Privatanwender verfügbar zu machen. Darüber hinaus unterstützt die Compliance API Logs Platform Administratoren bei der Durchführung von behördlichen Audits zur Anwendungsnutzung und zu Praktiken der Datenfreigabe.
Die zweite Maßnahme besteht darin, Funktionen mit höherem Risiko innerhalb von ChatGPT, ChatGPT Atlas und Codex konsequent mit dem Label **„Elevated Risk“** zu kennzeichnen und so die Art und Weise zu standardisieren, wie potenzielle Bedrohungen den Nutzern mitgeteilt werden.
OpenAI erklärte, dass bestimmte mit dem Internet verbundene Funktionen zwar die Nützlichkeit der KI erhöhen, aber dennoch Risiken bergen, die durch die derzeitigen Sicherheitsvorkehrungen der Branche nicht vollständig gemindert werden können. Diese Kennzeichnung bietet einen klaren Einblick in diese Risiken und ermöglicht es den Nutzern, fundierte Entscheidungen darüber zu treffen, ob sie die Funktionen nutzen möchten, insbesondere in Situationen, in denen sensible Informationen im Spiel sind. Wenn Entwickler beispielsweise den Internetzugang für Codex aktivieren, erscheint die Kennzeichnung auf der Benutzeroberfläche und beschreibt die damit verbundenen Änderungen, potenzielle Gefahren, geeignete Anwendungsfälle sowie Empfehlungen zur Risikominderung.
U.S.-Aktien erreichen historischen Meilenstein, während KI- und Luft- und Raumfahrtriesen auf ihr Debüt als Billionen-Dollar-Unternehmen vorbereiten
Elon Musk, Sam Altman und Dario Amodei, drei Giganten des Technologiesektors, schreiten den Börsengängen ihrer jeweiligen Unternehmen voran. Mit SpaceX, OpenAI und Anthropic – drei Branchenriesen, die einer Bewertung von einer Billion US-Dollar nahek
Schwedisches KI-Startup Lovable Eyes: Bewertung von 13,2 Milliarden US-Dollar nach großer Finanzierungsrunde
Während KI-gestützte Coding-Tools an Popularität gewinnen, hat das schwedische Startup Lovable eine bedeutende Finanzierungsrunde abgeschlossen. Das Unternehmen strebt danach, 3 Milliarden US-Dollar einzusammeln, was seine Bewertung potenziell auf 13





Heim






