透明ディスプレイを用いた津軽弁翻訳システムの開発

• Item type: Symposium(1)
• 公開日: 2024-08-21
• タイトル: 透明ディスプレイを用いた津軽弁翻訳システムの開発
• タイトル / 言語: en
• タイトル: Development of a Tsugaru Dialect Translation System Using a Transparent Display
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: システム・アーキテクチャ
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_5794
• 資源タイプ: conference paper
• 著者所属: 弘前大学大学院理工学研究科
• 著者所属: 弘前大学大学院理工学研究科
• 著者所属: 弘前大学大学院理工学研究科
• 著者所属(英): en
• 著者所属(英): Hirosaki Uniersity, Graduate School of Science and Technology
• 著者所属(英): en
• 著者所属(英): Hirosaki Uniersity, Graduate School of Science and Technology
• 著者所属(英): en
• 著者所属(英): Hirosaki Uniersity, Graduate School of Science and Technology
• 著者名: 斎藤, 遥大; 村上, 晃啓; 今井, 雅
• 著者名(英): Haruto, Saito; Akihiro, Murakami; Masashi, Imai
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 青森県津軽地方には固有の方言津軽弁がある．津軽弁は難解な方言であり，医療現場にてコミュニケーションの障害となりうる．本研究は津軽弁を共通語にリアルタイムで翻訳するシステムを開発する試みである．システムの構成は音声文字起こし部分と津軽弁を共通語に翻訳する部分，画面に出力する部分をそれぞれ実装し組み合わせたものから成り立っている．音声認識部分は wav2vec2.0 をファインチューニングすることで実現し，津軽弁翻訳部分は Transformer を用いたエンコーダ，デコーダモデルを実装し学習させることで実現した．それぞれの出力結果を加工し，透明ディスプレイに出力する．以上の流れを繰り返すシステムを作成したのでその成果を報告する．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: The Tsugaru region of Aomori Prefecture has a unique dialect known as Tsugaru dialect. Tsugaru dialect is a complex dialect that often causes communication challenges, particularly in medical situations. This research aims to develop a system that translates Tsugaru dialect into common Japanese in real-time. The system consists of several components: a speech-to-text module, a Tsugaru dialect to common Japanese translation module, and a display output module. The speech recognition module is implemented by fine-tuning wav2vec2.0. The Tsugaru dialect translation module is implemented by developing and training an encoder-decoder model using Transformer. The outputs from each component are processed and displayed on a transparent screen. This cycle is repeated continuously. This paper presents the results of this system.
• 書誌情報: DAシンポジウム2024論文集; 巻 2024, p. 193-199, 発行日 2024-08-21
• 出版者 / 言語: ja
• 出版者: 情報処理学会