arXiv reaDer
Improving Generative Visual Dialog by Answering Diverse Questions
  強化学習を使用した生成的ビジュアルダイアログモデルのトレーニングに関する以前の研究(Das et al。)は、Qbot-Abot画像推測ゲームを調査し、この「セルフトーク」アプローチが下流のダイアログ条件付き画像でパフォーマンスの向上につながることを示しました-推測タスク。ただし、この改善は飽和し、数ラウンドの相互作用の後に劣化を開始し、より良いVisual Dialogモデルにはつながりません。これは、セルフトーク中にQbotとAbotの間で繰り返される相互作用に一部起因するものであり、画像に関して有益ではないことがわかります。これを改善するために、さまざまな質問をするようにQbotを奨励する単純な補助目的を考案し、それにより繰り返しを減らし、AbotがRL ieの間により大きな状態空間を探索できるようにします。話をするためのより視覚的な概念に触れ、さまざまな質問に答えます。多数の自動メトリックと人間の研究を通じてアプローチを評価し、それがより良い対話につながることを実証します。より多様な(繰り返しの少ない)、一貫性のある(競合する交換が少ない)、流fluentな(より人間らしい)、詳細な対話でありながら、以前の仕事やアブレーションと同等のイメージ関連性を保ちます。
Prior work on training generative Visual Dialog models with reinforcement learning(Das et al.) has explored a Qbot-Abot image-guessing game and shown that this 'self-talk' approach can lead to improved performance at the downstream dialog-conditioned image-guessing task. However, this improvement saturates and starts degrading after a few rounds of interaction, and does not lead to a better Visual Dialog model. We find that this is due in part to repeated interactions between Qbot and Abot during self-talk, which are not informative with respect to the image. To improve this, we devise a simple auxiliary objective that incentivizes Qbot to ask diverse questions, thus reducing repetitions and in turn enabling Abot to explore a larger state space during RL ie. be exposed to more visual concepts to talk about, and varied questions to answer. We evaluate our approach via a host of automatic metrics and human studies, and demonstrate that it leads to better dialog, ie. dialog that is more diverse (ie. less repetitive), consistent (ie. has fewer conflicting exchanges), fluent (ie. more human-like),and detailed, while still being comparably image-relevant as prior work and ablations.
updated: Thu Oct 03 2019 03:01:48 GMT+0000 (UTC)
published: Mon Sep 23 2019 16:47:15 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト