短い形式のビデオソーシャルメディアは、視聴者にダイナミックなストーリーを伝えて注目を集めることにより、従来のメディアパラダイムからシフトします。特に、日常のオブジェクトのさまざまな組み合わせを使用して、面白くて理解しやすいユニークなシーンを表現できます。同じ会社が提供するTikTokとDouyinは、さまざまな市場(たとえば、米国と中国)向けに調整されている一方で、近年人気が高まっているこのような新しいメディアの人気のある例です。彼らがメディアのファッションや社会的特異性とともに文化の違いを表現しているという仮説は、私たちの研究の主要なターゲットです。そのために、まず、Microsoft Common Objects in COntext(MS-COCO)データセットで事前トレーニングされたFaster Regional Convolutional Neural Network(Faster R-CNN)を使用して、オブジェクト検出を実行します。ビデオから検出された一連のオブジェクトに基づいて、ラベル統計、ラベル類似性、ラベルパーソン分布などの統計分析を実行します。さらに、Kineticsデータセットで事前トレーニングされたTwo-Stream Inflated 3D ConvNet(I3D)を使用して、人間の行動を分類および分析します。 TikTokとDouyinの分布結果を比較することにより、オブジェクトの量、オブジェクトのカテゴリ、および人間の行動のカテゴリのコンテンツディメンションに沿って、2つの密接に関連するビデオソーシャルメディアプラットフォーム間の豊富な類似性とコントラストを明らかにします。
Short-form video social media shifts away from the traditional media paradigm by telling the audience a dynamic story to attract their attention. In particular, different combinations of everyday objects can be employed to represent a unique scene that is both interesting and understandable. Offered by the same company, TikTok and Douyin are popular examples of such new media that has become popular in recent years, while being tailored for different markets (e.g. the United States and China). The hypothesis that they express cultural differences together with media fashion and social idiosyncrasy is the primary target of our research. To that end, we first employ the Faster Regional Convolutional Neural Network (Faster R-CNN) pre-trained with the Microsoft Common Objects in COntext (MS-COCO) dataset to perform object detection. Based on a suite of objects detected from videos, we perform statistical analysis including label statistics, label similarity, and label-person distribution. We further use the Two-Stream Inflated 3D ConvNet (I3D) pre-trained with the Kinetics dataset to categorize and analyze human actions. By comparing the distributional results of TikTok and Douyin, we uncover a wealth of similarity and contrast between the two closely related video social media platforms along the content dimensions of object quantity, object categories, and human action categories.