WEKO3
アイテム
生成AIを用いた自動型付けの性能評価
https://ipsj.ixsq.nii.ac.jp/records/235694
https://ipsj.ixsq.nii.ac.jp/records/2356944fb70054-dbe6-4e82-887e-995688cd0063
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-Z86-2K-04.pdf (172.6 kB)
|
Copyright (c) 2024 by the Information Processing Society of Japan
|
| Item type | National Convention(1) | |||||||||
|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2024-03-01 | |||||||||
| タイトル | ||||||||||
| タイトル | 生成AIを用いた自動型付けの性能評価 | |||||||||
| 言語 | ||||||||||
| 言語 | jpn | |||||||||
| キーワード | ||||||||||
| 主題Scheme | Other | |||||||||
| 主題 | ソフトウェア科学・工学 | |||||||||
| 資源タイプ | ||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||||||
| 資源タイプ | conference paper | |||||||||
| 著者所属 | ||||||||||
| 福岡工大 | ||||||||||
| 著者所属 | ||||||||||
| 福岡工大 | ||||||||||
| 著者名 |
嵩原, ひびき
× 嵩原, ひびき
× 戸田, 航史
|
|||||||||
| 論文抄録 | ||||||||||
| 内容記述タイプ | Other | |||||||||
| 内容記述 | 近年，生成AIがソフトウェア開発の現場においても広く利用されつつある．Webシステムの開発ではセキュリティ向上を目的として，JavaScriptで書かれたコードをTypeScriptのコードへの変換が行われるが，その変換処理の1つとして型付けが挙げられる．本研究では，その型付けを生成AIを用いて自動化した場合の性能評価を行う．実験では初級中級上級に相当するJavaScriptのコードを用意し，評価尺度として型をチェックするテストケースの通過割合を用いた．生成AIとしてはChatGPT3.5およびChatGPT4を採用した．実験の結果，初級ではChatGPT3.5では半分程度，ChatGPT4では9割程度，中級では2割程度と6割程度，上級ではテスト自体に失敗した．今回の結果から，生成AIによる自動型付けの可能性が示唆されたと考えられる | |||||||||
| 書誌レコードID | ||||||||||
| 収録物識別子タイプ | NCID | |||||||||
| 収録物識別子 | AN00349328 | |||||||||
| 書誌情報 |
第86回全国大会講演論文集 巻 2024, 号 1, p. 169-170, 発行日 2024-03-01 |
|||||||||
| 出版者 | ||||||||||
| 言語 | ja | |||||||||
| 出版者 | 情報処理学会 | |||||||||
