講演名 2019-06-17
ベイズ的深層学習を用いた画像テキスト検索における信頼性評価
濱 健太(神戸大), 松原 崇(神戸大), 上原 邦昭(神戸大),
PDFダウンロードページ PDFダウンロードページへ
抄録(和) 深層ニューラルネットワークを含む, 多くの機械学習アルコ?リス?ムて?出力結果の信頼性をいかにして評価 するかは大きな課題て?ある. 分類問題, 回帰問題においては, ヘ?イシ?アンニューラルネットワークの出力の不確実性に よって信頼性を評価する方法か?提案されている. しかし, 画像テキスト検索は分類や回帰とは異なるタスクて?あり, 信 頼性の評価方法を検討する必要か?ある. 本研究て?は画像テキスト検索を分類問題としての解釈 (事後分布の不確実性), 回帰問題としての解釈 (埋め込み点の不確実性) により二つの不確実性を定義した. その結果, 二つの不確実性て?モテ? ル平均による検索精度の向上か?見られた. また, 事後分布の分散か?大きいテ?ータをクエリーから除くことて?, 大幅な精 度改善か?見られたことから, 分類問題としての不確実性か?信頼性の評価に適していることを示した. この傾向は異な るテ?ータセット (MSCOCO, Flickr30k), 異なる手法 (dropout, batch normalization), 異なる損失関数て?一貫して見ら れた.
抄録(英) Following the development of black-box machine learning algorithms, the practical demand of the re- liability assessment is rapidly rising. Recent progress in Bayesian deep learning has enabled us to quantify the uncertainty of its output, potentially providing a reliability measure. While many previous studies have evaluated the uncertainty measures for classification and regression tasks, their approaches are not always applicable to other tasks. This study investigates two sides of image-caption embedding and retrieval systems The embedding task is similar to the regression task, and the model averaging based on the regression improves the retrieval performance. However, its uncertainty measure cannot evaluate the reliability of retrieval appropriately, and the uncertainty mea- sure for the classification task is applicable. This study confirms that this tendency is common among datasets, DNN architectures, and similarity functions.
キーワード(和) マルチモータ?ル埋め込み / 画像テキスト間検索 / 信頼性評価
キーワード(英) multi-modal embedding / image-caption retrieval / uncertainty quantification
資料番号 IBISML2019-1
発行日 2019-06-10 (IBISML)

研究会情報
研究会 NC / IBISML / IPSJ-MPS / IPSJ-BIO
開催期間 2019/6/17(から3日開催)
開催地(和) 沖縄科学技術大学院大学
開催地(英) Okinawa Institute of Science and Technology
テーマ(和) NC、機械学習によるバイオデータマイニング、一般
テーマ(英) Neurocomputing, Machine Learning Approach to Biodata Mining, and General
委員長氏名(和) 庄野 逸(電通大) / 鹿島 久嗣(京大) / 関嶋 政和(東工大) / 倉田 博之(九工大)
委員長氏名(英) Hayaru Shouno(UEC) / Hisashi Kashima(Kyoto Univ.) / Masakazu Sekijima(Tokyo Tech) / Hiroyuki Kurata(Kyutech)
副委員長氏名(和) 鮫島 和行(玉川大) / 杉山 将(東大) / 津田 宏治(東大)
副委員長氏名(英) Kazuyuki Samejima(Tamagawa Univ) / Masashi Sugiyama(Univ. of Tokyo) / Koji Tsuda(Univ. of Tokyo)
幹事氏名(和) 吉本 潤一郎(奈良先端大) / 安部川 直稔(NTT) / 竹内 一郎(名工大) / 神嶌 敏弘(産総研) / 吉川 大弘(名古屋大) / 大久保 好章(北大) / 小谷野 仁(東工大) / 渡邉 真也(室蘭工業大) / 佐藤 寛之(電通大) / 高田 雅美(奈良女子大) / 田口 善弘(中央大) / 吉本 潤一郎(奈良先端大) / 伊藤 公人(北大)
幹事氏名(英) Junichiro Yoshimoto(NAIST) / Naotoshi Abekawa(NTT) / Ichiro Takeuchi(Nagoya Inst. of Tech.) / Toshihiro Kamishima(AIST) / Tomohiro Yoshikawa(Nagoya Univ.) / Yoshiaki Okubo(Hokkaido Univ.) / Hitoshi Koyano(Tokyo Tech) / Shinya Watanabe(Muroran Inst. Tech.) / Hiroyuki Sato(UEC) / Masami Takata(Nara Women's Univ.) / Yoshihiro Taguchi(Chuo Univ.) / Junichiro Yoshimoto(NAIST) / Kimihito Ito(Hokkaido Univ.)
幹事補佐氏名(和) 篠崎 隆志(NICT) / 瀧山 健(東京農工大) / 岩田 具治(NTT) / 大羽 成征(京大)
幹事補佐氏名(英) Takashi Shinozaki(NICT) / Ken Takiyama(TUAT) / Tomoharu Iwata(NTT) / Shigeyuki Oba(Kyoto Univ.)

講演論文情報詳細
申込み研究会 Technical Committee on Neurocomputing / Technical Committee on Infomation-Based Induction Sciences and Machine Learning / IPSJ Special Interest Group on Mathematical Modeling and Problem Solving / IPSJ Special Interest Group on Bioinformatics and Genomics
本文の言語 JPN
タイトル(和) ベイズ的深層学習を用いた画像テキスト検索における信頼性評価
サブタイトル(和)
タイトル(英) Reliability Assessment by Bayesian Deep Learning for Image-Caption Retrieval Task
サブタイトル(和)
キーワード(1)(和/英) マルチモータ?ル埋め込み / multi-modal embedding
キーワード(2)(和/英) 画像テキスト間検索 / image-caption retrieval
キーワード(3)(和/英) 信頼性評価 / uncertainty quantification
第 1 著者 氏名(和/英) 濱 健太 / Kenta Hama
第 1 著者 所属(和/英) 神戸大学(略称:神戸大)
Kobe University(略称:Kobe Univ.)
第 2 著者 氏名(和/英) 松原 崇 / Takashi Matsubara
第 2 著者 所属(和/英) 神戸大学(略称:神戸大)
Kobe University(略称:Kobe Univ.)
第 3 著者 氏名(和/英) 上原 邦昭 / Kuniaki Uehara
第 3 著者 所属(和/英) 神戸大学(略称:神戸大)
Kobe University(略称:Kobe Univ.)
発表年月日 2019-06-17
資料番号 IBISML2019-1
巻番号(vol) vol.119
号番号(no) IBISML-89
ページ範囲 pp.1-8(IBISML),
ページ数 8
発行日 2019-06-10 (IBISML)