電子情報通信学会 研究会発表申込システム
講演論文 詳細
技報閲覧サービス
技報オンライン
‥‥ (ESS/通ソ/エレソ/ISS)
技報アーカイブ
‥‥ (エレソ/通ソ)
 トップに戻る 前のページに戻る   [Japanese] / [English] 

講演抄録/キーワード
講演名 2019-10-26 14:25
作業写真列からの手順書の自動生成
西村太一京大)・橋本敦史OSX)・森 信介京大HCS2019-47
抄録 (和) 本研究は,写真列を入力として手順書を生成し,写真付き手順書の作成を容易にすることを目的とする.
この目的を達成するために,モデルは写真を説明する上で欠かせない物体や動作の表現(重要語)を含んだ手順書を生成することが求められる.
従来手法では重要語の存在は考慮されていなかった.これに対し,本研究では検索問題として取り組まれてきた手法を文生成の手法に組み込む手法を提案する.
これにより,モデルは入力写真に適した重要語を含む手順を検索し,参照しながら単語を出力することで,写真に適した重要語を含んだ手順書を生成することができる.
実験では,料理タスクを対象に手順書生成を行なった.その結果,本手法を適用することで生成文の自動評価尺度や,写真に適した重要語が生成文中に含まれているかといった評価においてベースラインと比較して性能が向上したことを確認できた. 
(英) In this paper, we tackle a problem to generate a procedural text from a photo sequence, which aims to help users create a multimedia procedural text only by taking photographs.
For this goal, the output texts should include important words that make sense as an instructions.
However, traditional methods do not consider these words.
To select the important words to describe a photo, the proposed method incorporates a retrieval method into a generation model.
From various experimental results, we confirmed that the method outperforms standard baselines.
キーワード (和) 手順書 / 写真列 / 共有潜在空間 / 文生成 / / / /  
(英) Procedural text / Photo sequence / Cross modal embedding / Sentence generation / / / /  
文献情報 信学技報, vol. 119, no. 252, HCS2019-47, pp. 41-46, 2019年10月.
資料番号 HCS2019-47 
発行日 2019-10-19 (HCS) 
ISSN Print edition: ISSN 0913-5685  Online edition: ISSN 2432-6380
著作権に
ついて
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034)
PDFダウンロード HCS2019-47

研究会情報
研究会 HCS  
開催期間 2019-10-26 - 2019-10-26 
開催地(和) 日本大学三軒茶屋キャンパス 
開催地(英) Nihon Univ. 
テーマ(和) 「コミュニケーションと食および一般」 
テーマ(英)  
講演論文情報の詳細
申込み研究会 HCS 
会議コード 2019-10-HCS 
本文の言語 日本語 
タイトル(和) 作業写真列からの手順書の自動生成 
サブタイトル(和)  
タイトル(英) Procedural Text Generation from a Photo Sequence 
サブタイトル(英)  
キーワード(1)(和/英) 手順書 / Procedural text  
キーワード(2)(和/英) 写真列 / Photo sequence  
キーワード(3)(和/英) 共有潜在空間 / Cross modal embedding  
キーワード(4)(和/英) 文生成 / Sentence generation  
キーワード(5)(和/英) /  
キーワード(6)(和/英) /  
キーワード(7)(和/英) /  
キーワード(8)(和/英) /  
第1著者 氏名(和/英/ヨミ) 西村 太一 / Taichi Nishimura / ニシムラ タイチ
第1著者 所属(和/英) 京都大学 (略称: 京大)
Kyoto University (略称: Kyoto Univ.)
第2著者 氏名(和/英/ヨミ) 橋本 敦史 / Atsushi Hashimoto / ハシモト アツシ
第2著者 所属(和/英) オムロンサイニックエックス株式会社 (略称: OSX)
OMRON SINICX Corporation (略称: OSX)
第3著者 氏名(和/英/ヨミ) 森 信介 / Shinsuke Mori / モリ シンスケ
第3著者 所属(和/英) 京都大学 (略称: 京大)
Kyoto University (略称: Kyoto Univ.)
第4著者 氏名(和/英/ヨミ) / /
第4著者 所属(和/英) (略称: )
(略称: )
第5著者 氏名(和/英/ヨミ) / /
第5著者 所属(和/英) (略称: )
(略称: )
第6著者 氏名(和/英/ヨミ) / /
第6著者 所属(和/英) (略称: )
(略称: )
第7著者 氏名(和/英/ヨミ) / /
第7著者 所属(和/英) (略称: )
(略称: )
第8著者 氏名(和/英/ヨミ) / /
第8著者 所属(和/英) (略称: )
(略称: )
第9著者 氏名(和/英/ヨミ) / /
第9著者 所属(和/英) (略称: )
(略称: )
第10著者 氏名(和/英/ヨミ) / /
第10著者 所属(和/英) (略称: )
(略称: )
第11著者 氏名(和/英/ヨミ) / /
第11著者 所属(和/英) (略称: )
(略称: )
第12著者 氏名(和/英/ヨミ) / /
第12著者 所属(和/英) (略称: )
(略称: )
第13著者 氏名(和/英/ヨミ) / /
第13著者 所属(和/英) (略称: )
(略称: )
第14著者 氏名(和/英/ヨミ) / /
第14著者 所属(和/英) (略称: )
(略称: )
第15著者 氏名(和/英/ヨミ) / /
第15著者 所属(和/英) (略称: )
(略称: )
第16著者 氏名(和/英/ヨミ) / /
第16著者 所属(和/英) (略称: )
(略称: )
第17著者 氏名(和/英/ヨミ) / /
第17著者 所属(和/英) (略称: )
(略称: )
第18著者 氏名(和/英/ヨミ) / /
第18著者 所属(和/英) (略称: )
(略称: )
第19著者 氏名(和/英/ヨミ) / /
第19著者 所属(和/英) (略称: )
(略称: )
第20著者 氏名(和/英/ヨミ) / /
第20著者 所属(和/英) (略称: )
(略称: )
講演者
発表日時 2019-10-26 14:25:00 
発表時間 20 
申込先研究会 HCS 
資料番号 IEICE-HCS2019-47 
巻番号(vol) IEICE-119 
号番号(no) no.252 
ページ範囲 pp.41-46 
ページ数 IEICE-6 
発行日 IEICE-HCS-2019-10-19 


[研究会発表申込システムのトップページに戻る]

[電子情報通信学会ホームページ]


IEICE / 電子情報通信学会