講演抄録/キーワード |
講演名 |
2017-10-12 14:30
[ショートペーパー]深層学習に基づく映像要約文生成の為のシーン自動分割に関する研究 ○二見悠樹・鹿嶋雅之・福元伸也・佐藤公則・渡邊 睦(鹿児島大) PRMU2017-78 |
抄録 |
(和) |
我々は膨大な映像コンテンツを日常的に扱っている.それらの映像は意味的なまとまりをもつシーンによって分割されており,その膨大な量の映像からユーザーの望むシーンを提示する必要性が高まっている.
また,近年では画像認識の分野において深層学習の有用性が示されている.その要因として,畳み込み層での優れた特徴抽出が挙げられる.
そこで本研究では,深層学習に基づくシーンの自動分割,さらには分割されたシーンを要約文生成を目的とする.
この第1段階として,Convolutional Neural Network(CNN)の中間出力を用いて映像のショット分割を行う.
本稿では,CNNによって抽出された特徴ベクトルを元に画像の類似性を比較することによるショット点の検出を提案する.
複数の映像コンテンツを用いた評価実験により,提案手法の有効性を確認した. |
(英) |
Huge amount of video contents are handled routinely.
The video is divided into scenes that consists of semantic clusters and, it becomes larger the necessity to present the scene user wants from the huge amount of videos.
In recent years, the efficacy of deep learning in image recognition has been shown.The purpose of this study was automatic segmentation of scenes based on deep learning, and to generate summary sentences of divided scenes.
In the first step, shots of videos are segmented.
In this paper, we propose the extraction method of shot points by comparing the similarity of the images based on feature vector extracted by CNN
Experimental results using a plurality of video contents have shown the effectiveness of the proposed method |
キーワード |
(和) |
深層学習 / ショット分割 / シーン分割 / 畳み込みニューラルネットワーク / / / / |
(英) |
Deep Learning / Shot Detection / Scene Segmentation / Convolutional Neural Network / / / / |
文献情報 |
信学技報, vol. 117, no. 238, PRMU2017-78, pp. 91-92, 2017年10月. |
資料番号 |
PRMU2017-78 |
発行日 |
2017-10-05 (PRMU) |
ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
PRMU2017-78 |