擬似カメラ画像の内部補完学習を用いた拡張内視鏡画像の生成

• Item type: SIG Technical Reports(1)
• 公開日: 2021-02-25
• タイトル: 擬似カメラ画像の内部補完学習を用いた拡張内視鏡画像の生成
• タイトル / 言語: en
• タイトル: Augmented Endoscopic Image Generation by Image Completion Learning for Virtual Images
• 言語: jpn
• キーワード / 主題Scheme: Other
• キーワード / 主題: セッション2-1
• 資源タイプ / 資源タイプ識別子: http://purl.org/coar/resource_type/c_18gh
• 資源タイプ: technical report
• 著者所属: 京都大学大学院情報学研究科
• 著者所属: 京都大学大学院情報学研究科
• 著者所属: 京都大学大学院情報学研究科
• 著者所属(英): en
• 著者所属(英): Graduate School of Informatics, Kyoto University
• 著者所属(英): en
• 著者所属(英): Graduate School of Informatics, Kyoto University
• 著者所属(英): en
• 著者所属(英): Graduate School of Informatics, Kyoto University
• 著者名: 新田, 潤平; 中尾, 恵; 松田, 哲也
• 著者名(英): Jumpei, Nitta; Megumi, Nakao; Tetsuya, Matsuda
• 論文抄録 / 内容記述タイプ: Other
• 論文抄録 / 内容記述: 内視鏡手術では視野の狭さから関心領域の三次元構造を捉えることは容易ではなく，手術支援のための画像生成技術が広く研究されている．本研究では胸腔鏡下肺がん切除術を対象に，機械学習に基づく画像補完によって内視鏡カメラ画像と 3D-CT モデルの位置合わせを達成し，臓器内部の腫瘍位置を可視化した拡張内視鏡画像を生成する手法を提案する．学習データが少ない問題に対して，臓器変形の統計的変位モデルから生成した擬似カメラ画像を用いて腫瘍位置の補完を学習した．さらに学習済みの画像補完モデルを内視鏡画像に適用する枠組みを提案し，臓器の姿勢推定を行うことなく位置合わせが達成された拡張現実画像を生成したので，結果を報告する．
• 論文抄録(英) / 内容記述タイプ: Other
• 論文抄録(英) / 内容記述: In endoscopic surgery, it is not easy to capture the three-dimensional structure of the target region due to the narrow field of view, and image generation techniques for surgical guidance have been widely studied. In this study, we propose a method to generate an augmented endoscopic image which visualizes the tumor position inside the organ. We achieved 2D-3D registration between endoscopic images and 3D-CT models by machine learning-based image completion for thoracoscopic lung cancer resection. Since there was few training data, we trained image completion model using virtual images generated from a statistical model of organ deformation. In addition, we proposed a framework to apply the learned image completion model to endoscopic images and generated augmented reality images in which 2D-3D registration was achieved without organ pose estimation.
• 書誌レコードID / 収録物識別子タイプ: NCID
• 書誌レコードID / 収録物識別子: AA11131797
• 書誌情報: 研究報告コンピュータビジョンとイメージメディア（CVIM）; 巻 2021-CVIM-225, 号 13, p. 1-8, 発行日 2021-02-25
• ISSN / 収録物識別子タイプ: ISSN
• ISSN / 収録物識別子: 2188-8701
• Notice: SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc.
• 出版者 / 言語: ja
• 出版者: 情報処理学会