Beyond Demographics: Aligning Role-playing LLM-based Agents Using Human Belief Networks

Araştırma Soruları

  • LLM ajanları yalnızca demografik bilgiyle mi, yoksa insan inanç ağlarıyla desteklendiğinde mi insan davranışlarıyla daha uyumlu hale gelir?
  • Tek bir inanç bilgisinin verilmesi, ilişkili konularda insan-LLM uyumunu artırabilir mi?
  • İnanç ağlarının yapısı, LLM’lerin insan görüşlerini taklit etme doğruluğunu nasıl etkiler?

Sonuçlar

  • Sadece demografik bilgi kullanıldığında LLM–insan görüş uyumu sağlanamadı.
  • Ajanlara tek bir inanç tohumu verildiğinde, inanç ağıyla ilişkili konularda uyum ciddi ölçüde arttı.
  • İnanç ağı dışında kalan konularda uyum artışı gözlenmedi.
  • Uyum derecesi, inanç ağındaki faktör yüklerinin gücüyle doğru orantılıydı.

Bulgular

  • Demografi yetersiz: Sadece demografik role-playing ile insan görüşleriyle anlamlı uyum sağlanamadı.

  • İnanç tohumu etkisi: Bir inanç bilgisiyle beslenen LLM ajanları, ilişkili konularda insan yanıtlarıyla daha iyi hizalandı.

  • Sınırlı uyum: Ölüm cezası gibi bazı konularda doğru görüş verilse bile sıfır uyum gözlendi.

  • Yapısal ilişki: Uyum, inanç ağındaki bağlantı gücüne bağlı olarak değişti.

  • Etik riskler: Yanlış bilgi veya zararlı inançların da simüle edilebilmesi, manipülasyon riski yaratıyor.

  • LLM Modelleri: 5

  • Sentetik Veri: 3

  • Yöntem: 4

  • Hız: 1

  • Etik: 4

  • Doğruluk Oranı: 4

  • Demografi: 3

Bu makale ile ilgili daha detaylı bilgiye ulaşmak isterseniz buraya tıklayarak ilgili makalenin ekine ulaşabilirsiniz.

5 dakikalık okuma

Diğer ilgili yazılarımız