PofoliaPofolia ile paylaşıldı

The Journal of Politics· 2021Q1

Kelime Gömme İşlemleri: Uygulamalı Araştırmalar İçin Neler İşe Yarar, Neler Yaramaz ve Farkı Nasıl Anlaşılır

Word Embeddings: What Works, What Doesn’t, and How to Tell the Difference for Applied Research

Pedro L. Rodríguez, Arthur Spirling

Kısa özet

Siyaset bilimi araştırmalarında kelime gömme işlemleri, sonuçların bağlam penceresi uzunluğu, boyutlar ve önceden eğitilmiş/yerel uyum gibi parametre seçimlerine karşı genel olarak sağlam olduğunu göstermektedir.

Yapay zekâ ile başlık ve abstract'tan üretildi; tam metin okunmaz.

Ana noktalar

  • Siyaset biliminde kelime gömme sonuçları, bağlam penceresi uzunluğu ve vektör boyutları gibi yaygın parametre seçimlerine karşı genellikle sağlamdır.
  • Önceden eğitilmiş kelime gömme modelleri, insan kodlayıcıları ve yerel olarak uyarlanmış modellerle karşılaştırılabilir veya onlardan daha iyi performans gösterir.
  • Metin tabanlı modellerin özgül performansını değerlendirmek için yeni, kitle kaynaklı bir Turing testi yöntemi sunulmaktadır.
  • Yerel uyum gerektiren durumlar için en iyi uygulama tavsiyeleri sunulmaktadır.

Yapay zekâ ile başlık ve abstract'tan üretildi; tam metin okunmaz.

Özet (abstract)

Word embeddings are becoming popular for political science research, yet we know little about their properties and performance. To help scholars seeking to use these techniques, we explore the effects of key parameter choices—including context window length, embedding vector dimensions, and pretrained versus locally fit variants—on the efficiency and quality of inferences possible with these models. Reassuringly we show that results are generally robust to such choices for political corpora of various sizes and in various languages. Beyond reporting extensive technical findings, we provide a novel crowdsourced “Turing test”–style method for examining the relative performance of any two models that produce substantive, text-based outputs. Our results are encouraging: popular, easily available pretrained embeddings perform at a level close to—or surpassing—both human coders and more complicated locally fit models. For completeness, we provide best practice advice for cases where local fitting is required.

Yazarların özeti; kaynağından alınmıştır. The Journal of Politics, 2021 · DOI ↗

ÇıkarımlarPremium
Makaleye SorÜcretsiz hesapla

Ücretsiz hesapla devam et

Makaleye Sor ile bu makaleye günde 3 soru ücretsiz; makaleyi kaydet, kaynakçasını al, ilgi alanına göre her gün yeni özetler. Çıkarımlar Premium.

Web'de ücretsiz devam et

Google ya da Apple hesabınla giriş; kart istemez. Bu makaleye geri dönersin.

Telefonda:

Alan: Genel Sosyal Bilimler

General Social SciencesSocial Sciences