PofoliaPofolia ile paylaşıldı

Journal of Documentation· 2026Q1

Akademik araştırmada yenilik: insan ve yapay zeka perspektifleri

Novelty in academic research: human and AI perspectives

Mike A Thelwall, Ashraf Maleki, Yunhan Yang

Kısa özet

Gemma 3 ve GPT-OSS gibi Büyük Dil Modelleri (BDM'ler), araştırma makalelerindeki veri, teori ve yöntem yeniliklerini belirlemede insan kodlayıcılarla orta düzeyde bir uyum göstermiştir, ancak bütünleştirici sentez ve bağlamsal transfer yeniliklerinde zorlanmaktadır.

Yapay zekâ ile başlık ve abstract'tan üretildi; tam metin okunmaz.

Ana noktalar

  • Yenilik türleri (teori, yöntem, veri, bütünleştirici sentez, bağlamsal transfer) için bir sınıflandırma şeması oluşturuldu.
  • Gemma 3 27B, GPT-OSS-120B ve GPT-OSS-20B BDM'leri, akademik makalelerdeki özgün katkıları belirlemek için kullanıldı.
  • BDM'ler, veri, teori ve yöntem yenilikleri konusunda insan kodlayıcılarla orta düzeyde bir uyum gösterdi.
  • Bütünleştirici sentez ve bağlamsal transfer yenilikleri için uyum düşüktü, bu da potansiyel tanımlayıcı sorunlara işaret ediyor.
  • Veri, teori ve yöntem yeniliğinin yaygınlığında önemli alan farklılıkları gözlemlendi.

Yapay zekâ ile başlık ve abstract'tan üretildi; tam metin okunmaz.

Özet (abstract)

Purpose Novelty is commonly regarded as one component of high-quality scholarship. Nevertheless, little is known about how novelty is claimed and what is considered novel across academia, including any field differences. In response, this article uses a sequential design to investigate novelty claims and field differences in academic research. Design/methodology/approach First, a simple classification scheme was created for theory, methods, data, integrative synthesis and contextual transfer novelties. Next, the Large Language Models (LLMs) Gemma 3 27B, GPT-OSS-120B and GPT-OSS-20B were used to identify original contributions in articles from the full texts of eight large journals representing contrasting general fields. Finally, a random sample of 50 articles per journal was classified by the authors with the same scheme and the results compared. Findings The three LLMs tested achieved moderate or substantial agreement with academic coders on the occurrence of data, theory and methods novelty within full text journal articles, but there was little agreement within and between humans and LLMs on integrative synthesis and contextual transfer novelties, suggesting that they may not be well defined concepts. There were also substantial field differences in the prevalence of data, theory and methods novelty. Practical implications Authors and reviewers should be careful to identify valid research contributions in interdisciplinary research or fields other than their home fields. Originality/value This is the first attempt to automatically classify academic research theory types.

Yazarların özeti; kaynağından alınmıştır. Journal of Documentation, 2026 · DOI ↗

ÇıkarımlarPremium
Makaleye SorÜcretsiz hesapla

Ücretsiz hesapla devam et

Makaleye Sor ile bu makaleye günde 3 soru ücretsiz; makaleyi kaydet, kaynakçasını al, ilgi alanına göre her gün yeni özetler. Çıkarımlar Premium.

Web'de ücretsiz devam et

Google ya da Apple hesabınla giriş; kart istemez. Bu makaleye geri dönersin.

Telefonda:

Statistics, Probability and UncertaintyDecision Sciences