Anzeige
Anzeige
MIT Technology Review News

Cyberkriminalität mit KI: Diese Large Language Models nutzen Hacker immer öfter

Forschende aus den USA haben erstmals systematisch untersucht, wie Cyberkriminelle große Sprachmodelle nutzen und wie gefährlich generative Technologie in diesem Bereich ist.

Von Wolfgang Stieler
2 Min.
Artikel merken
Anzeige
Anzeige
WormGPT kann großen Schaden anrichten. (Foto: wk1003mike/Shutterstock)

Während einschlägige Schwarzmark-Services wie WormGPT recht brauchbaren Schadcode produzieren, kann ein Großteil ihrer Phishing-Versuche von menschlichen Nutzern noch immer als solche erkannt werden. Technische Einzelheiten veröffentlichten Forschende jetzt in einem Preprint Paper.

Anzeige
Anzeige

Darin untersucht das Team die wachsende Bedrohung durch sogenannte „Malicious LLM Applications“ – von den Forschenden kurz „Malla“ genannt. Diese Anwendungen nutzen die Fähigkeiten von großen Sprachmodellen, um schädliche Aktivitäten durchzuführen, wie das Erstellen von bösartigem Code, das Entwerfen von Phishing-E-Mails oder dem Schreiben von Code für betrügerische Websites. Mit Malla können selbst technisch wenig versierte Personen komplexe Cyberangriffe durchführen, was nach Auffassung der Forschenden „die Bedrohungslandschaft auf ein beispielloses Niveau hebt“. Die Studie soll nicht nur Einblicke in das wirtschaftliche Ökosystem dieser Services ermöglichen, sondern auch helfen, Gegenmaßnahmen zu entwickeln.

APIs von großen Sprachmodellen im Visier

Um ihre kriminellen Dienste anzubieten, nutzen die Malla-Betreiber keine eigenen großen Sprachmodelle. Sie greifen vielmehr auf APIs vorhandener Sprachmodelle zurück, deren Sicherheitsmechanismen sie durch spezielle Prompts umgehen. Neben Sprachmodellen von OpenAI und Anthropic nutzen sie aber auch zunehmend sogenannte „unzensierte“ Sprachmodelle oder Open-Source-Modelle, die zum Beispiel auf Hugginface gehostet werden.

Anzeige
Anzeige

Die Studie identifiziert insgesamt acht große Sprachmodelle, die von Mallas genutzt werden, sowie 182 Prompts, die Schutzmaßnahmen öffentlicher LLM-APIs umgehen. GPT-3.5-turbo war das am häufigsten von Mallas angegriffene LLM. Andere missbrauchte OpenAI-Modelle waren Davinci-003 und Davinci-002, die allerdings im Januar 2024 von OpenAI abgeschaltet wurden. Auch Claude-instant und Claude-2–100k wurden als Backend-identifiziert, während im Open-Source-Bereich Varianten von Metas Modell Llama-2 ausgenutzt wurden.

Den Ergebnissen der Studie zufolge wiesen mehrere Malla-Dienste besorgniserregende Fähigkeiten auf. Insbesondere bei der Generierung von bösartigem Code. Der Malla-Service produzierte Schadcodes, die in keinem der Testfälle von VirusTotal entdeckt wurden, während WolfGPT besonders bei der Erstellung von Phishing-E-Mails hervorstach.

Anzeige
Anzeige

WolfGPT, Evil-GPT und DarkGPT stellen Betrieb ein

Die Untersuchung zeigt auch, dass Gegenmaßnahmen durchaus Wirkung zeigen können. WolfGPT, Evil-GPT und DarkGPT beispielsweise stellten den Betrieb ein, nachdem sie die Modelle von OpenAI DaVinci-002 und DaVinci-003 nicht mehr nutzen konnten. BadGPT und EscapeGPT wurden aufgrund der Schließung ihrer Hosting-Websites unzugänglich. WormGPT kündigte die Schließung seines Projekts aufgrund des Drucks durch Medienberichte an.

Problematisch ist aus Sicht der Forschenden allerdings die Verfügbarkeit immer mächtigerer Open-Source-Modelle und „unzensierter“ KIs, deren Betreiber absichtlich keinerlei Sicherheitsmaßnahmen gegen Missbrauch vorsehen. Die Autor:innen des Papers plädieren hier für eine moderate Einschränkung: Zugang zu diesen Modellen sollen nur „vertrauenswürdige“ Akteure bekommen. Der Vorschlag dürfte nicht ohne Widerspruch bleiben.

Fast fertig!

Bitte klicke auf den Link in der Bestätigungsmail, um deine Anmeldung abzuschließen.

Du willst noch weitere Infos zum Newsletter? Jetzt mehr erfahren

Anzeige
Anzeige
Kommentare

Community-Richtlinien

Bitte schalte deinen Adblocker für t3n.de aus!
Hallo und herzlich willkommen bei t3n!

Bitte schalte deinen Adblocker für t3n.de aus, um diesen Artikel zu lesen.

Wir sind ein unabhängiger Publisher mit einem Team von mehr als 75 fantastischen Menschen, aber ohne riesigen Konzern im Rücken. Banner und ähnliche Werbemittel sind für unsere Finanzierung sehr wichtig.

Schon jetzt und im Namen der gesamten t3n-Crew: vielen Dank für deine Unterstützung! 🙌

Deine t3n-Crew

Anleitung zur Deaktivierung
Artikel merken

Bitte melde dich an, um diesen Artikel in deiner persönlichen Merkliste auf t3n zu speichern.

Jetzt registrieren und merken

Du hast schon einen t3n-Account? Hier anmelden

oder
Auf Mastodon teilen

Gib die URL deiner Mastodon-Instanz ein, um den Artikel zu teilen.

Community-Richtlinien

Wir freuen uns über kontroverse Diskussionen, die gerne auch mal hitzig geführt werden dürfen. Beleidigende, grob anstößige, rassistische und strafrechtlich relevante Äußerungen und Beiträge tolerieren wir nicht. Bitte achte darauf, dass du keine Texte veröffentlichst, für die du keine ausdrückliche Erlaubnis des Urhebers hast. Ebenfalls nicht erlaubt ist der Missbrauch der Webangebote unter t3n.de als Werbeplattform. Die Nennung von Produktnamen, Herstellern, Dienstleistern und Websites ist nur dann zulässig, wenn damit nicht vorrangig der Zweck der Werbung verfolgt wird. Wir behalten uns vor, Beiträge, die diese Regeln verletzen, zu löschen und Accounts zeitweilig oder auf Dauer zu sperren.

Trotz all dieser notwendigen Regeln: Diskutiere kontrovers, sage anderen deine Meinung, trage mit weiterführenden Informationen zum Wissensaustausch bei, aber bleibe dabei fair und respektiere die Meinung anderer. Wir wünschen Dir viel Spaß mit den Webangeboten von t3n und freuen uns auf spannende Beiträge.

Dein t3n-Team

Kommentar abgeben

Melde dich an, um Kommentare schreiben und mit anderen Leser:innen und unseren Autor:innen diskutieren zu können.

Anmelden und kommentieren

Du hast noch keinen t3n-Account? Hier registrieren

Anzeige
Anzeige