レコメンデーションシステムは、多くの分野、特に学術分野で重要な役割を果たし、会議やジャーナルの選択プロセスを通じて研究者が研究を提出し、受け入れを増やすことを支援します。この研究は、論文提出推薦システムの効率的なアプローチとして、転移学習を使用した変圧器ベースのモデルを提案します。重要な情報(タイトル、要約、キーワードのリストなど)をジャーナルの目的と範囲と組み合わせることにより、モデルは論文の受け入れを最大化するトップKジャーナルを推奨できます。私たちのモデルは、次の2つの状態で開発されました。(i)単純な対照学習フレームワークを使用して、事前にトレーニングされた言語モデル(LM)を微調整します。単純な監視対象の対照的な目的を利用してすべてのパラメーターを微調整し、LMがドキュメント表現を効果的に学習するように促しました。 (ii)次に、微調整されたLMは、ダウンストリームタスクの機能のさまざまな組み合わせでトレーニングされました。この研究は、組み合わせたテストセットのトップ1、3、5、および10の精度でそれぞれ0.5173、0.8097、0.8862、0.9496を達成した場合に、以前のアプローチと比較して、論文提出推奨システムの効率を高めるためのより高度な方法を示唆しています。入力機能としてのタイトル、要約、およびキーワード。ジャーナルの目的と範囲を取り入れて、私たちのモデルは、トップ1、3、5、および10にそれぞれ0.5194、0.8112、0.8866、および0.9496を取得することにより、エキサイティングな結果を示しています。
The recommendation system plays a vital role in many areas, especially academic fields, to support researchers in submitting and increasing the acceptance of their work through the conference or journal selection process. This study proposes a transformer-based model using transfer learning as an efficient approach for the paper submission recommendation system. By combining essential information (such as the title, the abstract, and the list of keywords) with the aims and scopes of journals, the model can recommend the Top K journals that maximize the acceptance of the paper. Our model had developed through two states: (i) Fine-tuning the pre-trained language model (LM) with a simple contrastive learning framework. We utilized a simple supervised contrastive objective to fine-tune all parameters, encouraging the LM to learn the document representation effectively. (ii) The fine-tuned LM was then trained on different combinations of the features for the downstream task. This study suggests a more advanced method for enhancing the efficiency of the paper submission recommendation system compared to previous approaches when we respectively achieve 0.5173, 0.8097, 0.8862, 0.9496 for Top 1, 3, 5, and 10 accuracies on the test set for combining the title, abstract, and keywords as input features. Incorporating the journals' aims and scopes, our model shows an exciting result by getting 0.5194, 0.8112, 0.8866, and 0.9496 respective to Top 1, 3, 5, and 10.