分散表現と一般物体認識を用いた歌詞と画像の自動対応付方式
山口 翔,北山 大輔
電子情報通信学会技術研究報告,Vol.118,No.377,pp.29-34,東京都,2018年12月,査読無
論文PDF
概要
画像と音楽を合わせたスライドショー生成が一般的に行われている.スライドショー生成の為に,動画と歌詞に対する対応関係を自動的に評価する必要がある.本研究では,ユーザが保存している画像のデータセットと歌詞のフレーズごとのデータを利用する.画像に対して一般物体認識を利用して特徴語を取り出し,画像と歌詞の特徴語に分散表現を利用して類似度を求め対応関係を比較する手法を提案した.