切换到宽版
开启辅助访问
登录
立即注册
搜索
搜索
搜索
首页
Portal
论坛
同城
人才网
工具
菲龙网工具
个人中心
关于我们
每日签到
本地新闻
时事评论
华人世界
中国新闻
新闻视频
国际新闻
娱乐新闻
科技新闻
菲龙广场
房产网
菲龙速聘
二手交易
便民电话
美食餐厅
旅游签证
物流速运
商品买卖
二手车市场
严选
话费充值
便民电话
贺词页面
瀑布流页
汇率查询
APP下载
每日签到
我的任务
道具商店
每日签到
我的任务
道具商店
更改用户名
关于菲龙网
About US
联系菲龙网
活动回顾
加入我们
本版
用户
菲龙网
»
论坛
›
新闻频道
›
科技新闻
›
独家秘籍:探索昇思MindSpore如何让SOTA模型迁得快、对 ...
菲龙网编辑部7
有 744 人收听 TA
153428
主题
153445
回复
179803
积分
收听TA
发消息
加好友
本文来自
科技新闻
订阅
|
收藏
(
2953
)
菲龙网编辑部7发布过的帖子
0/81
长安的荔枝:别说岳云鹏加戏了,他映射另一种牛马,比原著更现实
0/88
海外开分9.1,2025年的国产剧出口佳作,外国人看了更上头
0/78
《护宝寻踪》结局:穆见晖没想到,100万买官印,却成他的买命钱
0/78
《鬼吹灯外传》才播1天,就拿下热搜榜第一,但有3大槽点不吐不快
0/77
湖南卫视又出“王炸剧”!一口气看6集,追剧停不下来,太上头
0/129
好家伙,央视再出《大江大河》姐妹篇,我断言:这部剧会火向全国
0/83
肉身躲子弹、高空速降、煤油灯变炸弹,年度最雷人的抗战神剧来了
0/81
注水严重,收视下跌!《长安的荔枝》四不像,大鹏版转祸为福
0/80
看了严屹宽的新剧,才知道为啥叫他“建模脸”,骨相太完美
查看TA的全部帖子>>
独家秘籍:探索昇思MindSpore如何让SOTA模型迁得快、对得齐
时间:2025-6-13 09:24
0
102
|
复制链接
|
互动交流
显示全部楼层
阅读模式
直达楼层
马上注册,结交更多好友
您需要
登录
才可以下载或查看,没有账号?
立即注册
x
“
昇思MindSpore支持大模型训练Day0迁移、推理一键部署,携手开发者共筑开源生态。
”
编辑丨李希
大模型发展日新月异,新的大模型层出不穷,参数规模从十亿级跃升至万亿级,模型结构从稠密到稀疏,应用范式走向多模态、Agent… 如此多的模型和技术如何在昇腾上快速的使能和体验,是昇腾开发者的核心诉求。昇思MindSpore “海纳百川”,全面融入主流生态,全面优化训练与推理全流程开发体验,让开发者用极小成本完成SOTA大模型的迁移,昇思MindSpore需攻克两大关键挑战:
1. 迁得快:让三方框架模型"零成本"迁移,避免重复造轮子,同时模型精度完全对齐。
2. 部署快:训转推全流程自动化,让大模型部署像执行一行命令一般敏捷高效。
Figure 1 MindSpore生态快速迁移解决方案的技术架构
接下来,我们将揭开昇思MindSpore的破局之道。
01
支持训练Day0迁移,构建跨框架的"无感智能翻译"能力
当大模型架构日新月异,开发者最怕被生态绑定。昇思MindSpore通过三重兼容术打通主流技术栈,支持主流加速库模型0代码迁移,通过精度自动对比工具实现跨框架、跨版本、跨策略快速调优,精度对齐原模型,实现在分布式并行策略保持不变的情况下,训练性能提升5%+。
在训练生态方面,通过MindSpeed/Megatron桥接层实现PyTorch模型零代码迁移,训练脚本可直接运行;通过动态图能力重构,昇思让PyTorch开发者获得"原生体验",同时借力MSAdapter工具自动转换95%以上接口,主流模型如DeepSeek、Pangu等迁移损耗逼近于零。
迁移只是起点,性能才是硬道理。昇思MindSpore构建了框架差异化技术,进一步提升模型训练效率:
动态图编译优化:多级流水线+即时编译(JIT),单卡训练效率提升40%
分布式智能调优:自动负载均衡工具解决万卡训练"木桶效应",线性度突破96%
逐层精度对齐:在昇腾硬件上实现主流模型逐层0误差,告别玄学调参
02
支持推理一键部署,分钟级拉起模型服务
在推理部署方面,借助vLLM-MindSpore插件实现HuggingFace模型半小时部署上线。面对千亿参数模型,昇思用三层部署范式重构推理链路:
1. HF权重兼容:支持HuggingFace权重直接加载,无需格式转换;通过vLLM-MindSpore插件实现分钟级服务化
2. 模型开箱即用:支持业界主流模型开箱即用,DeepSeek、Pangu、Qwen等20+模型已上线
3. 启动时延优化:权重加载耗时降低80%(百亿模型小于30秒);图编译时延压缩至毫秒级
03
开源开放:与社区开发者共建共赢
在人工智能的沃土之上,昇思MindSpore已生长为一片葱郁的开发者雨林。
自2020年3月28日播下开源的种子,这片技术雨林已孕育出50多个主流大模型。AI框架作为基础软件,以其根系持续释放创新养分。昇思MindSpore累计获得1200万次下载,开发者枝芽遍布130个国家和地区土壤,在2400座城市吐露生机,超过四万六千名开发者如蜂群般共舞其间,11万+行代码代码合入请求浇灌创新土壤,1700多篇学术硕果垂坠于智慧枝头。
面向开发者,昇思的终极武器是开源开放的创新生态:
社区共治:理事会+SIG组双轮驱动,企业/高校共定技术路线
资源普惠:提供免费算力平台(MindSpore大模型平台)
知识共享:20+技术SIG组覆盖AI前沿领域,开发者可参与核心开发
未来的AI软件基座,必属于开源开放与极简高效共舞的时代。
回复
举报
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
点我进行验证
本版积分规则
发表回复
回帖后跳转到最后一页
关闭
站长推荐
/1
【点击免费下载】菲龙网移动APP客户端
【点击免费下载】菲龙网移动APP客户端,新闻/娱乐/生活资讯生活通,带你了解菲律宾多一点!
查看 »
扫码添加微信客服
快速回复
返回列表
返回顶部