🆕最新资讯🆕
9月9日,掘力计划第23期线上技术沙龙邀请到吴碧珠博士做客,为大家带来题为《Linly Chinese LLaMA-2中文开源大模型方案分享》的演讲。本次分享详细介绍了沈琳琳教授团队自主研发的Linly系列中文开源大模型的技术方案,包括项目背景、模型架构、训练数据以及模型应用等方面。近年来,大规模预训练语言模型在自然语言处理任务中取得了重要进展。然而,目前主流的大规模语言模型在中文场景的应用效果并不理想。为了解决这个问题,深圳大学沈琳琳教授团队开展了Linly项目,旨在通过大规模中英文增量训练对齐模型的跨语言表示,实现性能强大的中文预训练模型。Linly项目基于TencentPretrain框架完成模型训练,已经在GitHub上开源,并受到广泛关注。该项目具有完全开源、支持多种推理硬件、兼容主流模型应用生态和性能强劲等优点。同时,文章还介绍了大语言模型的基础知识和Linly项目的方案设计。
来源:https://juejin.cn/ai
原文链接:https://aixinjiyuan.com/966.html,转载请注明出处~~~
评论0