@techreport{oai:ipsj.ixsq.nii.ac.jp:00211046, author = {小矢, 英毅 and 小宮山, 真実 and 片岡, 明 and 大石, 晴夫 and NTT, Access Network Service Systems Laboratories and NTT, Access Network Service Systems Laboratories and NTT, Access Network Service Systems Laboratories and NTT, Access Network Service Systems Laboratories}, issue = {24}, month = {May}, note = {近年,システムの画面を様々な手段で自動操作することにより,業務の改善や効率化を実現する技術が提案されている.従来技術では,システムを自動操作するための前処理として,自動操作の対象となる部品の抽出とその名称とのマッピングを,人がシステム画面を参照しながら実施している.しかし,システム画面が更改された場合にはマッピングの修正が必要となるなど課題がある.本研究では,システム画面に表示された情報から自動操作対象とそのラベルとなる部品を自動的に抽出し,それらの尤もらしい対応関係を機械的に取得することで,マッピングを自動的に行う方法を提案する.また,提案手法を実際のシステム画面に適用した評価結果を報告する., In recent years, technologies have been proposed to improve and increase the efficiency of business operations by automatically manipulating system screens in various ways. In the conventional technology, as a preprocessing step for automatic operation of the system, a person extracts the parts to be operated automatically and maps their names with reference to the system screen. However, there is a problem that the mapping needs to be modified when the system screen is updated. In this study, we propose a method to automatically perform mapping by automatically extracting the automatic operation target and its labeled components from the information displayed on the system screen, and mechanically obtaining their plausible correspondences. We also report the evaluation results of applying the proposed method to an actual system screen.}, title = {システム自動操作のための対象抽出とマッピング方法の提案と評価}, year = {2021} }