arXiv reaDer
スパースグラフ構築による映画の要約
Movie Summarization via Sparse Graph Construction
最も有益なシーンを含む短いビデオを作成することにより、フルレングスの映画を要約します。ターニングポイント(TP)であるシーン、つまりストーリーラインを説明する映画の重要なイベントを組み立てることで要約を作成できるという仮説を探ります。シーン間の関係を表すスパースムービーグラフを構築し、マルチモーダル情報を使用して構築することにより、TPシーンを識別するモデルを提案します。人間の裁判官によると、私たちのアプローチによって作成された要約は、シーケンスベースのモデルや汎用の要約アルゴリズムの出力よりも、より有益で完全であり、高い評価を受けています。誘導されたグラフは解釈可能であり、映画のジャンルごとに異なるトポロジを表示します。
We summarize full-length movies by creating shorter videos containing their most informative scenes. We explore the hypothesis that a summary can be created by assembling scenes which are turning points (TPs), i.e., key events in a movie that describe its storyline. We propose a model that identifies TP scenes by building a sparse movie graph that represents relations between scenes and is constructed using multimodal information. According to human judges, the summaries created by our approach are more informative and complete, and receive higher ratings, than the outputs of sequence-based models and general-purpose summarization algorithms. The induced graphs are interpretable, displaying different topology for different movie genres.
updated: Mon Dec 14 2020 13:54:34 GMT+0000 (UTC)
published: Mon Dec 14 2020 13:54:34 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト