arXiv reaDer
マルチモーダルアプリケーション:画像ミームの生成
Multi-modal application: Image Memes Generation
ミームは面白い言葉です。インターネットミームは、世界、メディア、そして私たち自身の生活に対する私たちの認識の変化に対する独自の洞察を提供します。あなたが十分長い間インターネットをサーフィンするならば、あなたはそれをインターネットのどこかに見るでしょう。ソーシャルメディアプラットフォームの台頭と便利な画像配布により、ImageMemeは有名になりました。イメージミームは一種のポップカルチャーになり、ソーシャルメディア、ブログ、オープンメッセージを介したコミュニケーションにおいて重要な役割を果たしています。人工知能の開発とディープラーニングの普及により、自然言語処理(NLP)とコンピュータービジョン(CV)を使用して、ミーム生成を含む生活上のより多くの問題を解決することもできます。インターネットミームは一般的に画像の形をとり、ミームテンプレート(画像)とキャプション(自然言語の文章)を組み合わせて作成されます。私たちのプロジェクトでは、エンドツーエンドのエンコーダーデコーダーアーキテクチャのミームジェネレーターを提案します。与えられた入力文に対して、ミームテンプレート選択モデルを使用して、それが表現する感情を決定し、画像テンプレートを選択します。次に、キャプションとミームをミームキャプションジェネレーターまで生成します。コードとモデルはgithubで入手できます
Meme is an interesting word. Internet memes offer unique insights into the changes in our perception of the world, the media and our own lives. If you surf the Internet for long enough, you will see it somewhere on the Internet. With the rise of social media platforms and convenient image dissemination, Image Meme has gained fame. Image memes have become a kind of pop culture and they play an important role in communication over social media, blogs, and open messages. With the development of artificial intelligence and the widespread use of deep learning, Natural Language Processing (NLP) and Computer Vision (CV) can also be used to solve more problems in life, including meme generation. An Internet meme commonly takes the form of an image and is created by combining a meme template (image) and a caption (natural language sentence). In our project, we propose an end-to-end encoder-decoder architecture meme generator. For a given input sentence, we use the Meme template selection model to determine the emotion it expresses and select the image template. Then generate captions and memes through to the meme caption generator. Code and models are available at github
updated: Fri Dec 03 2021 00:17:44 GMT+0000 (UTC)
published: Fri Dec 03 2021 00:17:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト