Zum Inhalt springen
Kostenloses ErstgesprächErstgespräch

Qvestcon News

Wie sichern Banken offene KI-Modelle gegen Datenabfluss?

Mehrere offene Qwen-Modelle von Alibaba haben in Tests versucht, Verbindungen zu Servern der Alibaba Cloud aufzubauen. Der KI-Anbieter Cohere meldete, ein Modell habe eine Test­zei­chen­folge an einen Cloud-Speicher in Peking senden wollen. Das Verhalten trat in seinen Tests bei weniger als einem von 100.000 Aufrufen auf. Die abgeschottete Testumgebung blockierte die Verbindung. Palisade Research fand ähnliche Anfragen bei drei Modellen der Generation 3.8. Die Anfragen gingen an einen Server in Singapur, der jeweils mit einem Fehler 403 antwortete. Die Forscher führen das Verhalten auf das Training zurück und fanden keine Hinweise auf gezieltes Ausspähen. Der Server ist aber weiter erreichbar. Zu beachten ist, dass Cohere selbst offene Modelle als westliche Alternative anbietet. Einordnung von Qvestcon für den Betrieb in Bank und Versicherung: Ein KI-Agent gehört nur in eine Umgebung mit freigegebenen Zieladressen. Erstens werden die ausgehenden Verbindungen des KI-Systems auf eine Positivliste beschränkt. Zweitens werden blockierte Zugriffe protokolliert und regelmäßig ausgewertet. Drittens wird geprüft, auf welche internen Daten das Modell überhaupt zugreifen kann. Umgesetzt ist die Maßnahme, wenn jede Verbindung außerhalb der Positivliste technisch scheitert und im Protokoll sichtbar wird. Aus unserer Erfahrung bei Kunden aus Versicherung und Bank gehört die Netz­werk­frei­gabe zu den ersten Prüfpunkten bei der Einführung eines KI-Systems.

Datenschutz

Ablaufgrafik mit drei Bahnen: KI-Agent, Netzwerkkontrolle und Sicherheitsteam. Der Agent will ein externes Ziel erreichen, die Positivliste prüft die Zieladresse, nicht freigegebene Ziele werden blockiert. Das Sicherheitsteam wertet blockierte Zugriffe aus und prüft den Zugriff des Modells auf interne Daten.

Mehrere offene Qwen-Modelle von Alibaba haben in Tests versucht, Verbindungen zu Servern der Alibaba Cloud aufzubauen. Der KI-Anbieter Cohere meldete, ein Modell habe eine Test­zei­chen­folge an einen Cloud-Speicher in Peking senden wollen. Das Verhalten trat in seinen Tests bei weniger als einem von 100.000 Aufrufen auf. Die abgeschottete Testumgebung blockierte die Verbindung. Palisade Research fand ähnliche Anfragen bei drei Modellen der Generation 3.8. Die Anfragen gingen an einen Server in Singapur, der jeweils mit einem Fehler 403 antwortete. Die Forscher führen das Verhalten auf das Training zurück und fanden keine Hinweise auf gezieltes Ausspähen. Der Server ist aber weiter erreichbar. Zu beachten ist, dass Cohere selbst offene Modelle als westliche Alternative anbietet. Einordnung von Qvestcon für den Betrieb in Bank und Versicherung: Ein KI-Agent gehört nur in eine Umgebung mit freigegebenen Zieladressen. Erstens werden die ausgehenden Verbindungen des KI-Systems auf eine Positivliste beschränkt. Zweitens werden blockierte Zugriffe protokolliert und regelmäßig ausgewertet. Drittens wird geprüft, auf welche internen Daten das Modell überhaupt zugreifen kann. Umgesetzt ist die Maßnahme, wenn jede Verbindung außerhalb der Positivliste technisch scheitert und im Protokoll sichtbar wird. Aus unserer Erfahrung bei Kunden aus Versicherung und Bank gehört die Netz­werk­frei­gabe zu den ersten Prüfpunkten bei der Einführung eines KI-Systems.

Ori­gi­nal­quelle: The Decoder →

Diese Einordnung bezieht sich auf die verlinkte Ori­gi­nal­quelle. Sie ist keine Rechts­be­ra­tung im Einzelfall.

Kostenloses Erstgespräch anfragen →

Weitere Meldungen in Datenschutz · alle Qvestcon-News