WEKO3
アイテム
リスク関数を用いたプライバシ保護安全強化学習
https://ipsj.ixsq.nii.ac.jp/records/239726
https://ipsj.ixsq.nii.ac.jp/records/239726bf892cb0-c8bc-4fe1-a192-9eb8913097f7
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-TOM1703002.pdf (987.4 kB)
2026年9月25日からダウンロード可能です。
|
Copyright (c) 2024 by the Information Processing Society of Japan
|
|
| 非会員：¥660, IPSJ:学会員：¥330, MPS:会員：¥0, DLIB:会員：¥0 | ||
| Item type | Trans(1) | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2024-09-25 | |||||||||
| タイトル | ||||||||||
| タイトル | リスク関数を用いたプライバシ保護安全強化学習 | |||||||||
| タイトル | ||||||||||
| 言語 | en | |||||||||
| タイトル | Privacy-preserving Safe Reinforcement Learning Using Risk Function | |||||||||
| 言語 | ||||||||||
| 言語 | jpn | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | [オリジナル論文] プライバシ保護，強化学習，安全強化学習，リスク関数，Q学習，準同型暗号 | |||||||||
| 資源タイプ | ||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_6501 | |||||||||
| 資源タイプ | journal article | |||||||||
| 著者所属 | ||||||||||
| 東京都立産業技術高等専門学校 | ||||||||||
| 著者所属 | ||||||||||
| 広島工業大学 | ||||||||||
| 著者所属(英) | ||||||||||
| en | ||||||||||
| Tokyo Metropolitan College of Industrial Technology | ||||||||||
| 著者所属(英) | ||||||||||
| en | ||||||||||
| Hiroshima Institute of Technology | ||||||||||
| 著者名 |
遠藤, 拓斗
× 遠藤, 拓斗
× 福永, 修一
|
|||||||||
| 著者名(英) |
Takuto, Endo
× Takuto, Endo
× Shuichi, Fukunaga
|
|||||||||
| 論文抄録 | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | プライバシ保護強化学習は機密データを暗号化した状態で学習するモデルであり，個人を特定可能な医療データや，収集された金融情報などのプライバシを保ったまま処理できる．このアルゴリズムは特に様々な個人情報を扱う医療分野で重要となるが，従来のプライバシ保護強化学習は学習した方策が患者に副作用をもたらす可能性を考慮していなかった．そこで本研究は，プライバシ保護強化学習にリスク関数を導入し，患者のプライバシを保護しつつ安全な方策を学習するモデルを提案する．提案手法は準同型暗号と呼ばれる暗号化したデータの演算が可能な暗号方式を用いてプライバシ保護を実現する．さらに，糖尿病患者へのインスリン投与において，低血糖に陥ってしまった場合にペナルティを与えるリスク関数を使用する．最後に，糖尿病患者に対するシミュレーションを行った結果，提案手法で学習した方策はプライバシを保護しつつ，低血糖に陥るリスクを抑えられることが分かった． | |||||||||
| 論文抄録(英) | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | Privacy-preserving reinforcement learning is a model that learns a policy from several sources, including personally identifiable medical data and collected financial information, without leaking sensitive information. Although this algorithm is significant in healthcare, where personal information is handled, conventional privacy-preserving reinforcement learning does not consider the possible side effects to the patients due to the learned policy. In this study, we introduce a risk function into the privacy-preserving reinforcement learning and propose a model that learns a safe policy without leaking sensitive information. We implement the proposed method by homomorphic encryption, which performs arithmetic operations on ciphertexts to archive confidentiality. Furthermore, the proposed method uses a risk function that penalizes hypoglycemia for its high risk in blood glucose control. Finally, we simulate blood glucose control and show that the policy learned by the proposed method minimizes the risk of hypoglycemia while protecting privacy. | |||||||||
| 書誌レコードID | ||||||||||
| 収録物識別子タイプ | NCID | |||||||||
| 収録物識別子 | AA11464803 | |||||||||
| 書誌情報 |
情報処理学会論文誌数理モデル化と応用（TOM） 巻 17, 号 3, p. 1-12, 発行日 2024-09-25 |
|||||||||
| ISSN | ||||||||||
| 収録物識別子タイプ | ISSN | |||||||||
| 収録物識別子 | 1882-7780 | |||||||||
| 出版者 | ||||||||||
| 言語 | ja | |||||||||
| 出版者 | 情報処理学会 | |||||||||
