「確率的鸚鵡」の監査に向けた「確率的白鳥」構想について

• Item type: SIG Technical Reports(1)
• 公開日: 2023-09-14
• タイトル: 「確率的鸚鵡」の監査に向けた「確率的白鳥」構想について
• タイトル / 言語: en
• タイトル: Stochastic SWANs for Auditing Stochasic Parrots: A Proposal
• 言語: jpn
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 早稲田大学
• 著者所属(英): en
• 著者所属(英): Waseda University
• 著者名: 酒井, 哲也
• 著者名(英): Tetsuya, Sakai
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: Bender らは大規模言語モデル (LLM: large language models) を「確率的鸚鵡」(stochastic parrots) と評した．本稿では，様々な評価軸にもとづき LLM ベースのテキスト対話システムを監査するための SWAN (Schematised Weighted Average Nugget) フレームワークの概要について述べる．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: Bender et al. have referred to large language models (LLMs) as stochastic parrots. This paper briefly discusses the SWAN (Schematised Weighted Average Nugget) framework for auditing LLM-based textual conversational systems using various criteria.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AN10114171
• 書誌情報: 研究報告情報基礎とアクセス技術（IFAT）; 巻 2023-IFAT-152, 号 13, p. 1-4, 発行日 2023-09-14
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2188-8884
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会