- 名称
- Federated Foundation Models: Privacy-Preserving and Collaborative Learning for Large Models
- 描述
基础模型(FMS),例如Llama,Bert,GPT,VIT和CLIP,在广泛的应用中取得了显着的成功,这是由于其利用大量数据进行预训练的能力所驱动。但是,优化FMS通常需要访问敏感数据,提高隐私问题并限制其在许多域中的适用性。在本文中,我们提出了联合基金会模型(FFMS)范式,该模型结合了FMS和联合学习的好处(FL),以促进多个最终用户的隐私权和协作学习 ...