亚新体育·(YAXIN)app官方平台网站-ios/安卓版/手机app下载 亚新yx体育

亚新yx体育【行业资讯】阿里云成国内首家支持Llama2大模型:轻松部署700亿参数

作者:小编    发布时间:2023-08-06 15:07:45    浏览:

[返回]

  近日,阿里云宣布在国内率先推出针对Llama2全系列版本的训练和部署方案,欢迎所有开发者来阿里云上打造专属大模型。

  Llama2是科技巨头Meta最新开源300109)的类ChatGPT大语言模型,包括70亿、130亿及700亿参数版本。中小企业、普通开发者对Llama2的再训练、微调和部署仍存在较高门槛,尤其是针对效果更胜一筹的大参数版本。

  因此亚新yx体育,阿里云牵头发起的AI模型社区魔搭ModelScope,第一时间上架了Llama2系列模型。

  开发者可在魔搭社区Llama2模型页面点击“Notebook快速开发”,一键拉起阿里云机器学习平台PAI,对模型进行云上开发和部署;在其他平台下载的Llama2模型,也可使用阿里云PAI进行开发。

  针对特殊的场景需求,开发者往往需使用微调训练的方法对模型进行“调整”,以获得特定领域的专业能力和知识。

  此时,PAI支持开发者在云上进行轻量级Lora微调或更深度的全参数微调。完成模型微调后,PAI支持开发者通过Web UI及API的方式部署Llama2,使模型可以通过网页或嵌入应用与使用者交互。

  相比本地单机训练Llama2,在阿里云上可完成对超大尺寸模型的深度开发,且预置环境免运维,操作简单便捷,同时开发者可获得丰富的AI计算资源和极致弹性。

  本地单卡GPU只能完成Llama2 70亿参数版本的轻量级Lora微调和推理,更大尺寸版本及更深度训练均很难支撑。

  在阿里云上,通过PAI灵骏智算服务提供的分布式计算能力,可对Llama2全尺寸版本进行轻量级和全参数微调,并进行高效部署和推理。

  作为全球前三、亚洲第一的云厂商,阿里云是中国AI浪潮重要的引领者和服务者,已构建完备的IaaS+PaaS+MaaS一体化AI服务。

  在基础设施层,阿里云拥有国内最强的智能算力储备,灵骏智算集群具备最大十万卡GPU规模扩展性,可承载多个万亿参数大模型同时在线训练;

  在AI平台层,阿里云机器学习平台PAI提供AI开发全流程的工程能力,PAI灵骏智算服务支撑了通义千问等超大模型的训练和应用,可将大模型训练性能提高近10倍,推理效率提升37%;

  在模型服务层,阿里云构建了国内最活跃的AI模型社区魔搭,并支持企业基于通义千问或三方大模型进行再训练。

  今年7月初,阿里云宣布,将把促进中国大模型生态的繁荣作为首要目标,向大模型创业公司提供包括模型训练、推理、部署、精调、测评、产品化落地等在内的全方位服务,并在资金和商业化探索方面提供充分支持。

  投资者关系关于同花顺软件下载法律声明运营许可联系我们友情链接招聘英才用户体验计划

  不良信息举报电话举报邮箱:增值电信业务经营许可证:B2-20090237亚新yx体育亚新yx体育亚新yx体育

搜索

网站地图