MÜNCHEN (IT BOLTWISE) – In der Welt der Künstlichen Intelligenz und des maschinellen Lernens sind Sicherheitsfragen von entscheidender Bedeutung. Jüngste Entdeckungen von Sicherheitslücken in beliebten Open-Source-ML-Toolkits werfen ein neues Licht auf die potenziellen Risiken, die mit der Nutzung dieser Technologien verbunden sind.
- Die besten Bücher rund um KI & Robotik
präsentiert von Amazon! - Unsere täglichen KI-News von IT Boltwise® bei LinkedIn abonnieren!
- KI-Meldungen bequem via Telegram oder per Newsletter erhalten!
- IT Boltwise® bei Facy oder Insta als Fan markieren und abonnieren!
- AI Morning Podcast bei Spotify / Amazon / Apple verfolgen!
- RSS-Feed 2.0 von IT Boltwise® für KI-News speichern!
Die Entdeckung von fast zwei Dutzend Sicherheitslücken in 15 verschiedenen Open-Source-Projekten im Bereich des maschinellen Lernens hat die Branche aufgerüttelt. Diese Schwachstellen, die sowohl auf der Server- als auch auf der Client-Seite gefunden wurden, könnten Angreifern ermöglichen, wichtige Server in Organisationen zu kapern, darunter ML-Modellregister, ML-Datenbanken und ML-Pipelines. Die Sicherheitsfirma JFrog hat in einer kürzlich veröffentlichten Analyse auf diese Gefahren hingewiesen.
Besonders besorgniserregend sind die serverseitigen Schwachstellen, die es Angreifern ermöglichen, Modellregister und ML-Datenbank-Frameworks aus der Ferne zu kapern. Zu den betroffenen Projekten gehören Weave, ZenML, Deep Lake, Vanna.AI und Mage AI. Eine der schwerwiegendsten Schwachstellen, CVE-2024-7340, betrifft das Weave ML-Toolkit und ermöglicht es einem niedrig privilegierten authentifizierten Benutzer, durch das Lesen einer Datei namens “api_keys.ibd” seine Privilegien auf ein Admin-Level zu erhöhen.
Ein weiteres Beispiel ist eine unzureichende Zugriffskontrolle im ZenML MLOps-Framework, die es einem Benutzer mit Zugriff auf einen verwalteten ZenML-Server ermöglicht, seine Privilegien von einem Betrachter auf volle Admin-Rechte zu erhöhen. Dies gibt dem Angreifer die Möglichkeit, den Secret Store zu modifizieren oder zu lesen. Diese Schwachstelle hat noch keine CVE-Kennung erhalten.
Die Sicherheitslücke CVE-2024-6507 in der Deep Lake AI-orientierten Datenbank ermöglicht es Angreifern, Systembefehle einzuschleusen, wenn ein Kaggle-Datensatz hochgeladen wird, da eine ordnungsgemäße Eingabesäuberung fehlt. Diese Schwachstelle wurde in der Version 3.9.11 behoben.
Die Auswirkungen solcher Schwachstellen sind weitreichend, da MLOps-Pipelines Zugang zu ML-Datensätzen, ML-Modelltraining und ML-Modellveröffentlichung haben können. Ein Angriff auf eine ML-Pipeline könnte zu einem extrem schweren Sicherheitsvorfall führen, wie JFrog betont. Die Angreifer könnten ML-Modelle manipulieren oder Daten vergiften, was schwerwiegende Folgen für die betroffenen Organisationen haben könnte.
Interessanterweise wurde auch ein defensives Framework namens Mantis entwickelt, das Prompt-Injection-Techniken nutzt, um Cyberangriffe auf große Sprachmodelle mit über 95% Effektivität abzuwehren. Dieses Framework kann automatisierte Cyberangriffe erkennen und durch gezielte Eingaben die Operationen des Angreifers stören oder sogar dessen Maschine kompromittieren.
Amazon-Trendangebote der letzten 24 Stunden mit bis zu 78% Rabatt (Sponsored)
- NIEDLICHER BEGLEITER: Eilik ist der ideale Begleiter für Kinder und Erwachsene, die Haustiere, Spiele und intelligente Roboter lieben. Mit vielen Emotionen, Bewegungen und interaktiven Funktionen.
Unseren KI-Morning-Newsletter «Der KI News Espresso» mit den besten KI-News des letzten Tages gratis per eMail - ohne Werbung: Hier kostenlos eintragen!
- Die Zukunft von Mensch und MaschineIm neuen Buch des renommierten Zukunftsforschers und Technologie-Visionärs Ray Kurzweil wird eine faszinierende Vision der kommenden Jahre und Jahrzehnte entworfen – eine Welt, die von KI durchdrungen sein wird
- Künstliche Intelligenz: Expertenwissen gegen Hysterie Der renommierte Gehirnforscher, Psychiater und Bestseller-Autor Manfred Spitzer ist ein ausgewiesener Experte für neuronale Netze, auf denen KI aufbaut
- Obwohl Künstliche Intelligenz (KI) derzeit in aller Munde ist, setzen bislang nur wenige Unternehmen die Technologie wirklich erfolgreich ein
- Wie funktioniert Künstliche Intelligenz (KI) und gibt es Parallelen zum menschlichen Gehirn? Was sind die Gemeinsamkeiten von natürlicher und künstlicher Intelligenz, und was die Unterschiede? Ist das Gehirn nichts anderes als ein biologischer Computer? Was sind Neuronale Netze und wie kann der Begriff Deep Learning einfach erklärt werden?Seit der kognitiven Revolution Mitte des letzten Jahrhunderts sind KI und Hirnforschung eng miteinander verflochten
Es werden alle Kommentare moderiert!
Für eine offene Diskussion behalten wir uns vor, jeden Kommentar zu löschen, der nicht direkt auf das Thema abzielt oder nur den Zweck hat, Leser oder Autoren herabzuwürdigen.
Wir möchten, dass respektvoll miteinander kommuniziert wird, so als ob die Diskussion mit real anwesenden Personen geführt wird. Dies machen wir für den Großteil unserer Leser, der sachlich und konstruktiv über ein Thema sprechen möchte.
Du willst nichts verpassen?
Du möchtest über ähnliche News und Beiträge wie "Sicherheitslücken in ML-Toolkits ermöglichen Serverübernahmen" informiert werden? Neben der E-Mail-Benachrichtigung habt ihr auch die Möglichkeit, den Feed dieses Beitrags zu abonnieren. Wer natürlich alles lesen möchte, der sollte den RSS-Hauptfeed oder IT BOLTWISE® bei Google News wie auch bei Bing News abonnieren.