arXiv reaDer
スマートマルチテナント連合学習
Smart Multi-tenant Federated Learning
連合学習(FL)は、分散型エッジデバイスでの現場モデルトレーニングを強化する新しい分散型機械学習手法です。ただし、複数の同時トレーニングアクティビティは、リソースに制約のあるデバイスに過負荷をかける可能性があります。この作業では、同時トレーニング活動を効果的に調整および実行するためのスマートマルチテナントFLシステムMuFLを提案します。まず、マルチテナントFLの問題を形式化し、マルチテナントFLシナリオを定義し、ベースラインを形成するためにアクティビティを順次トレーニングするバニラマルチテナントFLシステムを導入します。次に、マルチテナントFLを最適化するための2つのアプローチを提案します。1)アクティビティの統合により、トレーニングアクティビティがマルチタスクアーキテクチャを備えた1つのアクティビティにマージされます。 2)ラウンドのためにそれを訓練した後、活動分割は、グループ内の活動がより良い相乗効果を持つように、活動間の親和性を採用することによってそれをグループに分割します。広範な実験により、MuFLは他の方法よりも優れており、消費エネルギーは40%少ないことが示されています。この作業がコミュニティにマルチテナントFLのさらなる研究と最適化を促すことを願っています。
Federated learning (FL) is an emerging distributed machine learning method that empowers in-situ model training on decentralized edge devices. However, multiple simultaneous training activities could overload resource-constrained devices. In this work, we propose a smart multi-tenant FL system, MuFL, to effectively coordinate and execute simultaneous training activities. We first formalize the problem of multi-tenant FL, define multi-tenant FL scenarios, and introduce a vanilla multi-tenant FL system that trains activities sequentially to form baselines. Then, we propose two approaches to optimize multi-tenant FL: 1) activity consolidation merges training activities into one activity with a multi-task architecture; 2) after training it for rounds, activity splitting divides it into groups by employing affinities among activities such that activities within a group have better synergy. Extensive experiments demonstrate that MuFL outperforms other methods while consuming 40% less energy. We hope this work will inspire the community to further study and optimize multi-tenant FL.
updated: Sat Jul 09 2022 06:22:39 GMT+0000 (UTC)
published: Sat Jul 09 2022 06:22:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト