184M parametreli Semalith, prompt injection tespitinde Llama-Guard-3-8B’yi geride bıraktığını iddia ediyorSemalith v1.4: A Calibrated 184M Safety Classifier Achieving State-of-the-Art Prompt-Injection Detection at 44x Fewer Parameters than Llama-Guard-3-8B

ÖzetSummary

Semalith v1.4, 184M parametreli bir DeBERTa-v3-base güvenlik sınıflandırıcısıdır ve 44 kat daha az parametre kullanarak, Llama-Guard-3-8B'ye kıyasla en üst düzeyde istem enjeksiyonu tespiti sağladığını iddia etmektedir.Semalith v1.4 is a DeBERTa-v3-base security classifier with 184M parameters that claims to achieve top-tier prompt injection detection while using 44 times fewer parameters compared to Llama-Guard-3-8B.

Neden ÖnemliWhy it matters

Model, finansal hizmetler ve ajansal uygulamalarda hafif, çok eksenli güvenlik sınıflandırıcılarına duyulan ihtiyacı karşılayarak, zararsız istemlerde sıfır yanlış pozitif oranı sunar. Verimliliği, kaynak sınırlı ortamlarda güvenlik koruyucularının daha geniş çapta dağıtılmasını mümkün kılabilir.The model addresses the demand for lightweight, multi-faceted security classifiers in financial services and agency applications by delivering a zero false positive rate on benign prompts. Its efficiency could enable the broader deployment of security safeguards in resource-constrained environments.

Öne ÇıkanlarHighlights

• 22 sınıflı başlık, zararsız istemleri, dokuz istem enjeksiyonu alt türünü, genel zararları ve on bir BFSI etiketini kapsar.It covers 22 categories, including benign prompts, nine subtypes of prompt injection, general harms, and eleven BFSI tags.
• Llama-Guard-3-8B'yi tüm istem enjeksiyonu kıyaslamalarında (7/7) ve toplam 18 kıyaslamanın 11'inde geride bırakır.It outperforms Llama-Guard-3-8B in all prompt injection benchmarks (7/7) and 11 out of a total of 18 comparisons.
• 208 zararsız ajansal istemde FPR = 0.000 değerine ulaşırken, Llama-Guard-3-8B için bu oran 0.063'tür.It achieves an FPR of 0.000 on 208 benign agency prompts, whereas Llama-Guard-3-8B records an FPR of 0.063.

EleştiriCritical take

Makale, Llama-Guard-3'ün hâlâ genel zarar kıyaslamalarında lider konumda olduğunu belirterek, Semalith'in üstünlüğünün yalnızca istem enjeksiyonu ve BFSI bağlamlarıyla sınırlı olduğunu öne sürüyor.The article notes that Llama-Guard-3 still leads in general harm benchmarks, suggesting that Semalith's superiority is limited to prompt injection and BFSI contexts.