WEKO3
アイテム
固有表現アノテーションにおける画面操作記録を用いた不良回答検出
https://ipsj.ixsq.nii.ac.jp/records/231641
https://ipsj.ixsq.nii.ac.jp/records/231641ad1e0020-cf51-4748-9f36-f4bf4d67eae4
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-HCI24206040.pdf (3.1 MB)
2026年1月8日からダウンロード可能です。
|
Copyright (c) 2024 by the Information Processing Society of Japan
|
|
| 非会員：¥660, IPSJ:学会員：¥330, HCI:会員：¥0, DLIB:会員：¥0 | ||
| Item type | SIG Technical Reports(1) | |||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2024-01-08 | |||||||||||||
| タイトル | ||||||||||||||
| タイトル | 固有表現アノテーションにおける画面操作記録を用いた不良回答検出 | |||||||||||||
| 言語 | ||||||||||||||
| 言語 | jpn | |||||||||||||
| キーワード | ||||||||||||||
| 主題Scheme | Other | |||||||||||||
| 主題 | 機械学習・大規模言語モデル | |||||||||||||
| 資源タイプ | ||||||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_18gh | |||||||||||||
| 資源タイプ | technical report | |||||||||||||
| 著者所属 | ||||||||||||||
| 奈良先端科学技術大学院大学 | ||||||||||||||
| 著者所属 | ||||||||||||||
| 奈良先端科学技術大学院大学 | ||||||||||||||
| 著者所属 | ||||||||||||||
| 奈良先端科学技術大学院大学 | ||||||||||||||
| 著者所属 | ||||||||||||||
| 奈良先端科学技術大学院大学 | ||||||||||||||
| 著者所属(英) | ||||||||||||||
| en | ||||||||||||||
| Nara Institute of Science and Technology | ||||||||||||||
| 著者所属(英) | ||||||||||||||
| en | ||||||||||||||
| Nara Institute of Science and Technology | ||||||||||||||
| 著者所属(英) | ||||||||||||||
| en | ||||||||||||||
| Nara Institute of Science and Technology | ||||||||||||||
| 著者所属(英) | ||||||||||||||
| en | ||||||||||||||
| Nara Institute of Science and Technology | ||||||||||||||
| 著者名 |
福光, 嘉伸
× 福光, 嘉伸
× 松田, 裕貴
× 諏訪, 博彦
× 安本, 慶一
|
|||||||||||||
| 論文抄録 | ||||||||||||||
| 内容記述タイプ | Other | |||||||||||||
| 内容記述 | アノテーション作業をクラウドソーシングで行うことにより，低コストで機械学習のための学習データを収集できる．しかし，得られるデータの品質に大きなばらつきがあり，対価として報酬を付与すると可能な限り速く回答を行おうとする行動によって不良回答が発生する問題がある．そこで，本研究ではアノテーションタスクを対象として不良回答をリアルタイムで検出することを目的とし，作業中の画面操作から得られるカーソル移動量や操作時間などの特徴量を用いた検出手法を提案する．本稿では，適切回答・不良回答の分類を行い，精度を評価するとともに分類において重要な特徴量について分析を行う．機械学習モデルによる分類では，0.738 の Accuracy が得られ，ラベル付与数と，ラベル付与毎の平均カーソル移動量・クリック回数が，分類において重要であることが分かった． | |||||||||||||
| 書誌レコードID | ||||||||||||||
| 収録物識別子タイプ | NCID | |||||||||||||
| 収録物識別子 | AA1221543X | |||||||||||||
| 書誌情報 |
研究報告ヒューマンコンピュータインタラクション（HCI） 巻 2024-HCI-206, 号 40, p. 1-7, 発行日 2024-01-08 |
|||||||||||||
| ISSN | ||||||||||||||
| 収録物識別子タイプ | ISSN | |||||||||||||
| 収録物識別子 | 2188-8760 | |||||||||||||
| Notice | ||||||||||||||
| SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc. | ||||||||||||||
| 出版者 | ||||||||||||||
| 言語 | ja | |||||||||||||
| 出版者 | 情報処理学会 | |||||||||||||
