ACM Transactions on Knowledge Discovery from Data· 2026Q1· Derleme
LLM'lerden MLLM'lere ve Ajanlara: LLM Ekosistemindeki Jailbreak Saldırıları ve Savunmalarındaki Gelişen Paradigmalar Üzerine Bir Derleme
From LLMs to MLLMs to Agents: A Survey of Emerging Paradigms in Jailbreak Attacks and Defenses within LLM Ecosystem
- 14atıf
- Q1SCImago
- 2026yıl
Kısa özet
Bu derleme, Büyük Dil Modellerinin (LLM'ler) Çok Modlu LLM'lere (MLLM'ler) ve akıllı ajanlara doğru evrilmesiyle ortaya çıkan jailbreak saldırıları ve savunmalarının gelişen manzarasını sistematik olarak haritalandırarak temel güvenlik zorluklarını ve mevcut araştırmalardaki sınırlılıkları belirlemektedir.
Yapay zekâ ile başlık ve abstract'tan üretildi; tam metin okunmaz.
Ana noktalar
- LLM'ler, yeni güvenlik açıkları getiren MLLM'lere ve ajanlara doğru evrilmektedir.
- Jailbreak saldırıları, etki ve saldırgan izinlerine göre kategorize edilmekte, yöntemler, veri kümeleri ve metrikler analiz edilmektedir.
- Savunmalar, yanıt zamanlaması ve teknik yaklaşıma göre organize edilmektedir.
- Mevcut derlemeler, ajan güvenliği, hibrit saldırılar, ayrıntılı deneysel analiz ve son gelişmeler konularında yetersiz kalmaktadır.
Yapay zekâ ile başlık ve abstract'tan üretildi; tam metin okunmaz.
Özet (abstract)
Large language models (LLMs) are rapidly evolving from single-modal systems to multimodal LLMs and intelligent agents, expanding their capabilities while introducing new security risks. This paper presents a systematic survey of the complexity of jailbreak attacks and defense mechanisms within the expanding LLM ecosystem. We first trace the developmental trajectory from LLMs to MLLMs and Agents, highlighting the core security challenges emerging at each stage. Next, we categorize mainstream jailbreak techniques from the attack impact and attacker permissions perspectives, and provide comprehensive analysis of representative attack methods, related datasets, and evaluation metrics. On the defense side, we organize existing strategies based on response timing and technical approach, offering a structured understanding of their implementation. Furthermore, we identify key limitations in existing surveys, such as insufficient attention to agent-specific security issues, absence of a clear taxonomy for hybrid jailbreak methods, lack of detailed analysis of experimental setups, and outdated coverage of recent advancements. To address these limitations, we provide an updated synthesis of recent work and introduce future research directions in areas such as dataset construction, evaluation framework optimization, and strategy generalization. Our study aims to deepen the understanding of jailbreak mechanisms and promote the development of adaptive defenses for LLMs.
Yazarların özeti; kaynağından alınmıştır. ACM Transactions on Knowledge Discovery from Data, 2026 · DOI ↗
Ücretsiz hesapla devam et
Makaleye Sor ile bu makaleye günde 3 soru ücretsiz; makaleyi kaydet, kaynakçasını al, ilgi alanına göre her gün yeni özetler. Çıkarımlar Premium.
Web'de ücretsiz devam etGoogle ya da Apple hesabınla giriş; kart istemez. Bu makaleye geri dönersin.
Telefonda:
Alan: Yapay Zeka
Artificial IntelligenceComputer Science