次回の更新記事:RAGの検索はチャンキング戦略ひとつでこんなに変わる…(公開予定日:2026年03月25日)
AIDB Daily Papers

MOSAIC:大規模言語モデルの倫理、社会、個人の側面を解き明かす

原題: MOSAIC: Unveiling the Moral, Social and Individual Dimensions of Large Language Models
著者: Erica Coppolillo, Emilio Ferrara
公開日: 2026-02-09 | 分野: LLM 安全性 ベンチマーク 人間 AI

※ 日本語タイトル・ポイントはAIによる自動生成です。正確な内容は原論文をご確認ください。

ポイント

  • 大規模言語モデル(LLM)の倫理的推論能力を評価するため、倫理、社会、個人の特性を総合的に評価するベンチマークMOSAICを構築した。
  • 既存研究が道徳基盤理論(MFT)に偏重しているのに対し、MOSAICは社会価値、性格特性、個人の特性など、より広範な倫理的側面を考慮している点が新しい。
  • MOSAICを用いた評価の結果、MFTだけではAIシステムの複雑な倫理的行動を十分に評価できないことが初めて実証的に示された。

Abstract

Large Language Models (LLMs) are increasingly deployed in sensitive applications including psychological support, healthcare, and high-stakes decision-making. This expansion has motivated growing research into the ethical and moral foundations underlying LLM behavior, raising critical questions about their reliability in ethical reasoning. However, existing studies and benchmarks rely almost exclusively on Moral Foundation Theory (MFT), largely neglecting other relevant dimensions such as social values, personality traits, and individual characteristics that shape human ethical reasoning. To address these limitations, we introduce MOSAIC, the first large-scale benchmark designed to jointly assess the moral, social, and individual characteristics of LLMs. The benchmark comprises nine validated questionnaires drawn from moral philosophy, psychology, and social theory, alongside four platform-based games designed to probe morally ambiguous scenarios. In total, MOSAIC includes over 600 curated questions and scenarios, released as a ready-to-use, extensible resource for evaluating the behavioral foundations of LLMs. We validate the benchmark across three models from different families, demonstrating its utility across all assessed dimensions and providing the first empirical evidence that MFT alone is insufficient to comprehensively evaluate complex AI systems' ethical behavior. We publicly release the dataset and our benchmark Python library.

Paper AI Chat

この論文のPDF全文を対象にAIに質問できます。

質問の例:

AIチャット機能を利用するには、ログインまたは会員登録(無料)が必要です。

会員登録 / ログイン

💬 ディスカッション

ディスカッションに参加するにはログインが必要です。

ログイン / アカウント作成 →

関連するAIDB記事