Journal of Empirical Legal Studies· 2026Q1
Hazır Büyük Dil Modelleri Güvenilmez Yargıçlardır
Off‐The‐Shelf Large Language Models Are Unreliable Judges
- 3atıf
- Q1SCImago
- 2026yıl
Kısa özet
Hazır büyük dil modelleri (BDM'ler), yargılamaları komut ifadelerine, çıktı işleme yöntemlerine ve model seçimine oldukça duyarlı olduğu ve dilsel olağan anlamı doğru bir şekilde değerlendiremedikleri için güvenilmez hukuk yorumcularıdır.
Yapay zekâ ile başlık ve abstract'tan üretildi; tam metin okunmaz.
Ana noktalar
- BDM'lerin hukuksal yargıları, komut ifadelerine, çıktı işleme yöntemlerine ve model seçimine göre önemli ölçüde farklılık göstermektedir.
- En gelişmiş BDM'ler, hukuki dilin olağan anlamını güvenilir bir şekilde yakalayamamaktadır.
- Temel BDM'leri asistan modeline dönüştürmek, olağan anlam yargılarında öngörülemeyen değişikliklere yol açabilir.
- Asistan modeline dönüştürme işlemi, insan yargılarıyla olağan anlam üzerindeki uyumu azaltabilir.
Yapay zekâ ile başlık ve abstract'tan üretildi; tam metin okunmaz.
Özet (abstract)
ABSTRACT I conduct large‐scale empirical experiments to test the reliability of large language models (LLMs) as legal interpreters. Combining computational methods with the results of a new survey, I find that LLM judgments are highly sensitive to prompt phrasing, output processing methods, and choice of model. I also find that frontier LLMs do not accurately assess linguistic ordinary meaning, and I provide original evidence that tuning base models into assistant models shifts ordinary‐meaning judgments unpredictably and can worsen their alignment with human judgments. These findings undermine LLMs' credibility as legal interpreters and cast doubt on claims that LLMs elucidate ordinary meaning.
Yazarların özeti; kaynağından alınmıştır. Journal of Empirical Legal Studies, 2026 · DOI ↗
Ücretsiz hesapla devam et
Makaleye Sor ile bu makaleye günde 3 soru ücretsiz; makaleyi kaydet, kaynakçasını al, ilgi alanına göre her gün yeni özetler. Çıkarımlar Premium.
Web'de ücretsiz devam etGoogle ya da Apple hesabınla giriş; kart istemez. Bu makaleye geri dönersin.
Telefonda:
Alan: Siyaset Bilimi ve Uluslararası İlişkiler
Political Science and International RelationsSocial Sciences