Llama Prompt Guard 2

Winziger Klassifikator gegen Prompt-Injection und Jailbreaks

Llama-4-Sicherheitsmodelle

Das Llama Prompt Guard 2 Modell im Überblick

Llama Prompt Guard 2 erkennt Prompt-Injection und Jailbreaks, also Versuche, die Anweisungen oder Schutzmechanismen eines Sprachmodells zu umgehen. Es bewertet jeden Text als gutartig oder bösartig und lässt sich jedem Modell vorschalten, auch vor Dokumente und Webinhalte, die ein Agent verarbeitet.

Es gibt zwei Größen: 86M für die beste Erkennung auch in anderen Sprachen und 22M für sehr geringe Latenz. Beide laufen laut Meta auch auf CPUs. Anders als Llama Guard 4 prüft Prompt Guard 2 keine Inhaltskategorien, sondern nur Angriffe.

Name:

Llama Prompt Guard 2 (86M und 22M)

Entwickler:

Meta

Veröffentlichung:

April 2025

Modelltyp:

Kleiner Klassifikator (gutartig oder bösartig), rein textbasiert

Parameter:

86 Mio. bzw. 22 Mio. (ohne Einbettungsschicht)

Architektur:

Encoder-Modell: 86M auf Basis von mDeBERTa-base, 22M auf Basis von DeBERTa-v3-xsmall

Kontextlänge:

512 Token, längere Texte in Abschnitten prüfen

Variationen von Llama Prompt Guard 2

Prompt Guard 2 86M

Die genauere Variante auf mehrsprachiger Basis, trainiert mit englischen und anderssprachigen Angriffen.

Prompt Guard 2 22M

Laut Meta rund 75 % weniger Latenz und Rechenaufwand, dafür schwächer bei anderen Sprachen als Englisch.

Ergänzung

Llama Guard 4 prüft Inhalte auf 14 Gefahrenkategorien. Zusammen decken beide Angriffe und schädliche Inhalte ab.

Spezialitäten von Llama Prompt Guard 2

Hohe Trefferquote

Die 86M-Variante erkennt 97,5 % der Angriffe bei nur 1 % Fehlalarmen.

Sehr schnell

19,3 ms je Prüfung mit der 22M-Variante auf einer A100.

Auch auf CPU

Beide Größen lassen sich laut Meta lokal auf CPU oder GPU betreiben.

Teil von LlamaFirewall

Fertig eingebunden in Metas Schutz-Framework für Agenten.

Benchmarks & Leistung

Individuelle KI-Beratung

Ist Llama Prompt Guard 2 das passende Modell für Sie?

Prompt Guard 2 ist klein genug für jeden Endpunkt. Wir binden es mit Ihnen als Schutzschicht in Ihre KI-Anwendungen ein.

Die Post-Training Pipeline für Llama Prompt Guard 2

Trainingsdaten & Trainingsprozess

Prompt Guard 2 baut auf Encoder-Modellen von Microsoft auf, die unter der MIT-Lizenz stehen. Meta hat den Datensatz an Angriffen gegenüber Version 1 erweitert und eine Verlustfunktion gewählt, die Fehlalarme bei harmlosen Texten stärker bestraft.

Neu ist außerdem ein gehärteter Tokenizer, der Tricks wie eingestreute Leerzeichen oder zerstückelte Wörter abfängt. Die Unterscheidung zwischen Injection und Jailbreak aus Version 1 ist entfallen, weil sie sich laut Meta als zu unscharf erwiesen hat.

Hardware & Deployment

  • Unterstützte Inferenz-Software: Transformers, eingebunden in LlamaFirewall
  • Gewichte in FP32: rund 1,1 GB (86M) bzw. 0,3 GB (22M)
  • Laut Meta auf CPU und GPU in Echtzeit nutzbar
  • Texte über 512 Token in Abschnitte teilen und parallel prüfen

Empfohlene Hardware-Spezifikation

  • Eigene Abschätzung auf Basis der Gewichtsgröße
  • 22M: normale Server-CPU, für hohen Durchsatz eine kleine GPU
  • 86M: eine kleine GPU wie die L4 für geringe Latenz
  • Ohne eigene Hardware: Betrieb in unserer GPU Cloud, DSGVO-konform in Deutschland
Anwendungsfälle

Empfohlene Anwendungsfälle für Llama Prompt Guard 2

Llama Prompt Guard 2 eignet sich als schneller Vorfilter vor jedem Sprachmodell. In einer KI-Beratung planen wir mit Ihnen die passende Schutzschicht.

Schutz vor Prompt-Injection
Eingeschleuste Anweisungen in Dokumenten und E-Mails erkennen.
Jailbreak-Erkennung
Versuche abfangen, Schutzmechanismen zu umgehen.
Agenten absichern
Webinhalte und Tool-Ergebnisse vor der Verarbeitung prüfen.
Vorfilter für Endpunkte
Vor jedem Sprachmodell einsetzbar, auch vor externen APIs.
Filterung ohne GPU
Die 22M-Variante auf vorhandenen CPU-Servern.
Meta
Llama Prompt Guard 2

Stärken & Schwächen von Llama Prompt Guard 2

Ihre Llama Prompt Guard 2 Lösung

Llama Prompt Guard 2 im eigenen Rechenzentrum betreiben

Wir planen die Integration für Llama Prompt Guard 2, übernehmen Inbetriebnahme, Quantisierung und Betrieb und hosten das Modell auf Wunsch DSGVO-konform in unserem zertifizierten Rechenzentrum in Limburg an der Lahn.

FAQ - Häufige Fragen

Wissenswertes zu Llama Prompt Guard 2

Die 86M-Variante erkennt Angriffe zuverlässiger, vor allem in anderen Sprachen als Englisch. Die 22M-Variante braucht nur etwa ein Fünftel der Zeit je Prüfung und genügt, wenn fast nur englische Texte geprüft werden.

Prompt Guard 2 erkennt nur Angriffe auf das Sprachmodell selbst. Llama Guard 4 prüft Inhalte auf 14 Gefahrenkategorien wie Hass oder Straftaten. Für einen umfassenden Schutz lassen sich beide kombinieren.

Unter der Llama 4 Community License. Die Einschränkung für Unternehmen in der EU gilt laut Wortlaut der Nutzungsrichtlinie für multimodale Modelle. Prompt Guard 2 verarbeitet nur Text.

Ja. Meta hat beide Größen unter anderem mit Deutsch getestet. Die 86M-Variante ist dafür deutlich besser geeignet, weil sie auf einem mehrsprachigen Modell aufbaut.

Ja. Über unsere GPU Cloud stellen wir die nötige Rechenleistung bereit. Alternativ bündelt der MaaS Proxy verschiedene Modelle über eine einheitliche Schnittstelle. Beide Wege betreiben wir DSGVO-konform in Deutschland.

Möchten Sie individuell beraten werden?

Unsere KI-Experten sind für Sie da!