WEKO3
アイテム
系列信号の長期的依存関係を学習するための自己・相互注意機構を用いたリザバーコンピューティングの提案
https://ipsj.ixsq.nii.ac.jp/records/229811
https://ipsj.ixsq.nii.ac.jp/records/22981160b58928-1fa9-4e26-a8c4-f85b8093e9c3
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-Z85-6B-05.pdf (499.9 kB)
|
Copyright (c) 2023 by the Information Processing Society of Japan
|
| Item type | National Convention(1) | |||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2023-02-16 | |||||||||||
| タイトル | ||||||||||||
| タイトル | 系列信号の長期的依存関係を学習するための自己・相互注意機構を用いたリザバーコンピューティングの提案 | |||||||||||
| 言語 | ||||||||||||
| 言語 | jpn | |||||||||||
| キーワード | ||||||||||||
| 主題Scheme | Other | |||||||||||
| 主題 | 人工知能と認知科学 | |||||||||||
| 資源タイプ | ||||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||||||||
| 資源タイプ | conference paper | |||||||||||
| 著者所属 | ||||||||||||
| 東大 | ||||||||||||
| 著者所属 | ||||||||||||
| 東大 | ||||||||||||
| 著者所属 | ||||||||||||
| 東大 | ||||||||||||
| 著者名 |
小西, 文昂
× 小西, 文昂
× 廣瀬, 明
× 夏秋, 嶺
|
|||||||||||
| 論文抄録 | ||||||||||||
| 内容記述タイプ | Other | |||||||||||
| 内容記述 | 自然言語処理タスクにおいて著しい性能向上と学習時間の短縮に成功したTransformerは、近年、時系列データの予測など様々な系列データに対して適用されている。本論文は、再帰型ニューラルネットワークの一種であるリザバーコンピューティングに、Transformerの重要な構成要素となっている自己注意機構(self-attention)と相互注意機構(cross-attention)を組み込むことによって、系列信号フィルタリングのための長期的な依存関係を捉えることができるモデルを提案する。 | |||||||||||
| 書誌レコードID | ||||||||||||
| 収録物識別子タイプ | NCID | |||||||||||
| 収録物識別子 | AN00349328 | |||||||||||
| 書誌情報 |
第85回全国大会講演論文集 巻 2023, 号 1, p. 19-20, 発行日 2023-02-16 |
|||||||||||
| 出版者 | ||||||||||||
| 言語 | ja | |||||||||||
| 出版者 | 情報処理学会 | |||||||||||
