arXiv reaDer
購入するように私を引き付けます:マルチモーダルマルチ構造化情報を使用した広告コピーライティングの生成
Attract me to Buy: Advertisement Copywriting Generation with Multimodal Multi-structured Information
最近、オンラインショッピングは徐々に世界中の人々の一般的な買い物方法になりました。素晴らしい商品広告は、多くの場合、より多くの人々を購入に引き付けます。これらの広告は、視覚的な空間情報やきめ細かい構造情報など、商品のマルチモーダルマルチ構造情報を適切に統合します。ただし、従来のマルチモーダルテキスト生成は、存在および発生したものの従来の記述に焦点を合わせており、現実の世界での広告コピーライティングの要件とは一致しません。広告のコピーライティングは、鮮やかな言語スタイルと忠実さのより高い要件を持っているからです。残念ながら、再利用可能な評価フレームワークが不足しており、データセットが不足しています。したがって、データセットE-MMAD(e-コマーシャルマルチモーダルマルチ構造化広告コピーライティング)を提示します。これは、テキスト生成ではるかに詳細な情報を必要とし、サポートします。注目すべきことに、これはこの分野で最大のビデオキャプションデータセットの1つです。したがって、このデータセットの実際の需要を解決するために、構造化された情報推論の強度に関するベースライン方法と忠実度評価メトリックを提案します。これは、すべてのメトリックで以前の方法を大幅に上回っています。データセットとメソッドは、https://e-mmad.github.io/e-mmad.net/index.htmlで間もなく公開されます。
Recently, online shopping has gradually become a common way of shopping for people all over the world. Wonderful merchandise advertisements often attract more people to buy. These advertisements properly integrate multimodal multi-structured information of commodities, such as visual spatial information and fine-grained structure information. However, traditional multimodal text generation focuses on the conventional description of what existed and happened, which does not match the requirement of advertisement copywriting in the real world. Because advertisement copywriting has a vivid language style and higher requirements of faithfulness. Unfortunately, there is a lack of reusable evaluation frameworks and a scarcity of datasets. Therefore, we present a dataset, E-MMAD (e-commercial multimodal multi-structured advertisement copywriting), which requires, and supports much more detailed information in text generation. Noticeably, it is one of the largest video captioning datasets in this field. Accordingly, we propose a baseline method and faithfulness evaluation metric on the strength of structured information reasoning to solve the demand in reality on this dataset. It surpasses the previous methods by a large margin on all metrics. The dataset and method are coming soon on https://e-mmad.github.io/e-mmad.net/index.html.
updated: Sat May 07 2022 03:33:00 GMT+0000 (UTC)
published: Sat May 07 2022 03:33:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト