arXiv reaDer
誰でも使えるマルチレベルの大規模言語モデル
Multilevel Large Language Models for Everyone
大規模な言語モデルは、ここ数年で大幅な進歩を遂げました。ただし、それらは一般的なものまたは分野固有のものであり、コミュニティをさまざまなグループに分割します。このペーパーでは、これらの大規模な言語モデルをより大きなマップに統合します。そこでは、ユーザーの個人的な入力とインターネットからの情報に基づいて、一般的なモデルと特定のモデルがリンクされ、相互に改善することができます。いくつかの大規模な言語モデルをリンクするというアイデアは、人間の脳の機能からインスピレーションを得ています。大脳皮質の特定の領域は、特定の低レベルの機能に特化しています。そして、これらの領域は連携して、より複雑な高レベルの機能を実現できます。人間の脳皮質におけるこのような動作は、グローバル レベル、フィールド レベル、ユーザー レベルのモデルを含むマルチレベルの大規模言語モデルの設計に光を当てます。ユーザー レベルのモデルはローカル マシン上で実行され、効率的な応答を実現し、ユーザーのプライバシーを保護します。このようなマルチレベル モデルでは、冗長性が軽減され、単一レベル モデルよりもパフォーマンスが向上します。提案されたマルチレベルのアイデアは、自然言語処理、コンピューター ビジョン タスク、専門アシスタント、ビジネス、ヘルスケアなどのさまざまなアプリケーションに適用できます。
Large language models have made significant progress in the past few years. However, they are either generic or field specific, splitting the community into different groups. In this paper, we unify these large language models into a larger map, where the generic and specific models are linked together and can improve each other, based on the user personal input and information from the internet. The idea of linking several large language models together is inspired by the functionality of human brain. The specific regions on the brain cortex are specific for certain low level functionality. And these regions can jointly work together to achieve more complex high level functionality. Such behavior on human brain cortex sheds the light to design the multilevel large language models that contain global level, field level and user level models. The user level models run on local machines to achieve efficient response and protect the user's privacy. Such multilevel models reduce some redundancy and perform better than the single level models. The proposed multilevel idea can be applied in various applications, such as natural language processing, computer vision tasks, professional assistant, business and healthcare.
updated: Tue Jul 25 2023 03:18:04 GMT+0000 (UTC)
published: Tue Jul 25 2023 03:18:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト