| 講演名 | 2019-11-09 サービス視点の指標に基づいた機械学習モデル評価手法の提案 手塚 伸(日立), 畑崎 恵介(日立), 保田 淑子(日立), |
|---|---|
| PDFダウンロードページ |  PDFダウンロードページへ |
| 抄録(和) | 新たな価値を生み出すサービスとして，IT/OTデータを機械学習で分析し，生成されたモデルを活用するものが注目されている．他方，特にサービスとモデルの開発者が異なる場合，頻繁なモデルの更新が，常にサービスの品質向上に繋がるとは限らない．そのため，サービス視点の指標に基づくモデルの再評価が必要となるが，評価用データの用意等，サービス開発者の負担は大きい．そこで本稿では，モデル開発時の評価用データセットとフィルタリング処理を用いたモデル評価手法を提案する．本手法により，サービス開発者が評価用データセットを用意することなく，かつ内容を非開示のまま，サービス視点の指標に基づいたモデルの評価を実現した． |
| 抄録(英) | The new services with machine learning models which generated from IT / OT data attract attention. On the other hand, especially when the service and model developers are different, frequent model updates do not always lead service quality improvement. Therefore, it is necessary to re-evaluate the model based on the service perspective indicators. However, preparation of the large-scale evaluation dataset is difficult for the service developers. Therefore, in this paper, we propose a model evaluation method using the model developer’s dataset and filtering processes. The method allows service developers to evaluate models based on service perspective indicators without dataset preparation and prevents disclose of dataset contents |
| キーワード(和) | モデル評価 / 機械学習 / マーケットプレイス / サービスコンピューティング |
| キーワード(英) | Model Evaluation / Machine Learning / Marketplace / Service Computing |
| 資料番号 | KBSE2019-36,SC2019-33 |
| 発行日 | 2019-11-01 (KBSE, SC) |
| 研究会情報 | |
| 研究会 | KBSE / SC |
|---|---|
| 開催期間 | 2019/11/8(から2日開催) |
| 開催地（和） | 信州大学 |
| 開催地（英） | Shinshu University |
| テーマ（和） | 「ソフトウェア／サービスとAI」および一般 |
| テーマ（英） | |
| 委員長氏名（和） | 粂野 文洋(日本工大) / 中村 匡秀(神戸大) |
| 委員長氏名（英） | Fumihiro Kumeno(Nippon Inst. of Tech.) / Masahide Nakamura(Kobe Univ.) |
| 副委員長氏名（和） | 中川 博之(阪大) / 菊地 伸治(物質・材料研究機構) / 山登 庸次(NTT) |
| 副委員長氏名（英） | Hiroyuki Nakagawa(Osaka Univ.) / Shinji Kikuchi(NIMS) / Yoji Yamato(NTT) |
| 幹事氏名（和） | 高橋 竜一(茨城大) / 田辺 良則(鶴見大) / 細野 繁(東京工科大) / 木村 功作(富士通研) |
| 幹事氏名（英） | Ryuichi Takahashi(Ibaraki Univ.) / Yoshinori Tanabe(Tsurumi Univ.) / Shigeru Hosono(Tokyo Univ. of Tech.) / Kosaku Kimura(Fujitsu Lab.) |
| 幹事補佐氏名（和） | 菊地 奈穂美(OKI) / 金子 朋子(NII) |
| 幹事補佐氏名（英） | Nahomi Kikuchi(OKi) / Tomoko Kaneko(NII) |
| 講演論文情報詳細 | |
| 申込み研究会 | Technical Committee on Knowledge-Based Software Engineering / Technical Committee on Service Computing |
|---|---|
| 本文の言語 | JPN |
| タイトル（和） | サービス視点の指標に基づいた機械学習モデル評価手法の提案 |
| サブタイトル（和） | |
| タイトル（英） | A Proposal of an Evaluation Method for Machine Learning Models based on Service Perspective Indicators |
| サブタイトル（和） | |
| キーワード(1)（和/英） | モデル評価 / Model Evaluation |
| キーワード(2)（和/英） | 機械学習 / Machine Learning |
| キーワード(3)（和/英） | マーケットプレイス / Marketplace |
| キーワード(4)（和/英） | サービスコンピューティング / Service Computing |
| 第 1 著者 氏名（和/英） | 手塚 伸 / Shin Tezuka |
| 第 1 著者 所属（和/英） | 日立製作所(略称：日立) Hitachi Ltd.(略称：Hitachi Ltd.) |
| 第 2 著者 氏名（和/英） | 畑崎 恵介 / Keisuke Hatasaki |
| 第 2 著者 所属（和/英） | 日立製作所(略称：日立) Hitachi Ltd.(略称：Hitachi Ltd.) |
| 第 3 著者 氏名（和/英） | 保田 淑子 / Yoshiko Yasuda |
| 第 3 著者 所属（和/英） | 日立製作所(略称：日立) Hitachi Ltd.(略称：Hitachi Ltd.) |
| 発表年月日 | 2019-11-09 |
| 資料番号 | KBSE2019-36,SC2019-33 |
| 巻番号（vol） | vol.119 |
| 号番号（no） | KBSE-274,SC-275 |
| ページ範囲 | pp.77-82(KBSE), pp.77-82(SC), |
| ページ数 | 6 |
| 発行日 | 2019-11-01 (KBSE, SC) |