大会名称
2016年 総合大会
大会コ-ド
2016G
開催年
2016
発行日
2016/3/1
セッション番号
D-12A
セッション名
パターン認識・メディア理解A
講演日
2016/3/15
講演場所(会議室等)
センター2号館 3F 2306
講演番号
D-12-18
タイトル
重要単語からなる料理テキストと料理画像のマルチモーダル特徴量を用いた料理名推定
著者名
○小田将規青野雅樹
キーワード
マルチモーダル, 画像分類, テキスト
抄録
本報告では、重要単語からなる料理テキストと料理画像のマルチモーダル特徴量を用いた料理名推定に関して述べる。データとしては、UPMC Food-101を用いた。これは、料理画像と料理テキストからなる、101種類のカテゴリーに分けられたデータである。本研究では、このデータを事前に半分の大きさに訓練データとテストデータに分割する。訓練では、料理テキストからは重要語を抽出したものに主成分分析を適用し、一方、料理画像には、VGGが提供するデータからCNN特徴量を抽出したものに主成分分析を適用した。これら2種類の主成分分析を適用して得られたデータに正準相関分析を適用して射影行列を生成する。テスト時には料理画像だけを与え、事前に訓練で得られた射影行列を用いて料理カテゴリーを推定するものである。
本文pdf
PDF download   

PayPerView