-
昇思开源社区新星:共同成长,助中国AI框架崛起
时间来到2023年,学长负责的MindSpore NLP套件正处在项目初期的高速开发演进过程中,需要大量社区开发者投入其中。曾子瑄忙于学校大创项目结题和准备推免材料没有参加,但他在校内组织的MindSpore开源实习宣传吸引大量开发者加入。
随着研究生推免的结束,曾子瑄可支配的灵活时间明显比以前更多了,这时候恰好学长正在推广昇思开源社区中“关于在MindSpore NLP套件中迁移模型、单卡微调模型和多卡微调模型”的任务,并且完成任务还能获得报酬和奖励,于是曾子瑄很快便接下了这个任务。
在这个过程中,曾子瑄作为MindSpore NLP SIG的核心成员,先后完成四个大模型的迁移工作,包括一个Falcon大模型微调案例开发。在富有挑战性的算子开发领域,他申请了开源实习,完成了GPU后端的Flash Attention算子在MindSpore NLP的接入与调优,实现了两倍以上的推理速度提升。在当时,MindSpore NLP套件几乎不支持任何量化方法,而在比开源实习更高阶的开源之夏项目中,曾子瑄完成了基于MindSpore的BitsAndBytes量化库实现,降低了模型推理对显存的需求,提升了计算性能,增强了模型部署在端侧的可行性。
这其中既有他自身的努力,也离不开昇思开源社区的助力。
“在开发中,MindSpore提供的函数式和对象式融合编程范式,使构建神经网络和训练流程变得简单,提供的API映射文档也比较全面,大大降低了模型迁移的工作量。在自定义算子方面,MindSpore提供了Custom接口用于接入不同后端的算子,Custom接口会找到动态链接库中相应的函数,只要按照接口规范定义算子,就能够实现高效的运行时算子加载与运算。”曾子瑄对开发过程中MindSpore的技术优势印象颇深。
昇思将围绕开发者真实诉求,持续升级框架架构,使能AI模型未来创新
除了框架本身的技术特性外,加入开源社区还有一个明显的好处,就是当遇到难题时,有诸多技术大牛可以一起讨论解决问题,曾子瑄对此也深有体会。
“在开源之夏的项目开发过程中,因为需要迁移的BitsAndBytes库本身软件耦合程度高,关于算子接入的问题刚开始一直没找到合适的解决方案,后来摸清楚了项目本身的构建和执行逻辑,再跟MindSpore布道师和负责MindSpore自定义算子接口的工程师一起讨论,得出了基本解决方案,随后顺利地完成了程序中由上至下一条核心执行线路的移植,奠定了项目完成的基础。”他说道。
不难发现,正是在社区提供的诸多昇思MindSpore技术公开课、开源实习和活动比赛中,以曾子瑄为代表的年轻开发者获得了学习、实践和以练促学的机会,逐步成为AI领域中的新星。截至目前,昇思开源社区已提供30多个系列的AI主题课程,开展过600多场线上和线下的专题学习活动,并且已发布1100+开源实习任务,以及300+模型和算子任务,还举办过30多场大赛。
与昇思共成长,携手托起中国AI的未来
回想起在昇思开源社区中成长的点点滴滴,曾子瑄坦言自己收获颇多。
- 责任编辑: 吕栋 
-
首个国产靶向药美国获批,意义多大?
2024-12-23 14:05 -
中车斩获迪拜56亿美元大单
2024-12-23 11:35 -
“人在家中坐,账户天上来”,多家银行回应
2024-12-23 11:33 养老与社保 -
规模堪比美国总部!英伟达被曝拟在台湾建立新总部
2024-12-23 11:00 -
“虾滑疑吃出蛆”?海底捞回应
2024-12-21 17:21 食品安全 -
民营经济促进法草案,提请全国人大常委会会议审议
2024-12-21 09:54 政策风向标 -
越南关停2G,推动4G手机出货量骤增
2024-12-20 22:17 观网财经-科创 -
中国“光伏OPEC”发文严厉质问央企,怎么回事?
2024-12-20 18:06 -
微信发力社交电商?小店上线“送礼物”功能
2024-12-20 18:00 观网财经-互联网 -
华为超充机器人亮相:明年上半年量产
2024-12-20 16:33 华为 -
美企侵权,华为在欧洲胜诉
2024-12-20 15:48 观网财经-科创 -
小红书大面积封号登顶热搜,有用户称参加个活动就被封
2024-12-20 14:30 大公司 -
他俩一个自杀、一个被捕?苹果AI推送假新闻闹大了
2024-12-20 12:38 网络安全 -
中国1年期国债收益率跌至1%
2024-12-20 10:39 金融观察 -
“年底前央行降准幅度或达0.5%”
2024-12-20 10:06 金融观察 -
英伟达最大买家曝光,一年囤了近50万颗GPU
2024-12-19 20:18 观网财经-科创 -
首个智能体安全生态协作组织成立:华为、小米、高通等加入
2024-12-19 19:56 观网财经-科创 -
放下身段的日本车企,学起中国来能有多彻底?
2024-12-19 16:30 观察者头条 -
苹果被曝与腾讯、字节接洽大模型合作,此前传与百度合作不顺
2024-12-19 14:20 大公司 -
日本买的EUV光刻机开始安装,准备造2nm芯片
2024-12-19 12:25 观网财经-科创
相关推荐 -
细节公布:美军出动超125架战机,还玩了个声东击西 评论 224核设施提前疏散了?“福尔道地区仿佛无事发生” 评论 184“轰炸伊朗未经国会授权且违宪”,她呼吁弹劾特朗普 评论 163美国袭击伊朗三处核设施,“B-2轰炸机参与了” 评论 1053时隔14年,金爵奖再次颁给了中国女演员 评论 57最新闻 Hot
-
“忘了伊拉克、阿富汗?白宫需要头脑清醒的人指出问题”
-
“轰炸伊朗未经国会授权且违宪”,她呼吁弹劾特朗普
-
至少27枚弹道导弹,伊朗开始“报复”
-
伊朗处决一名受雇于以色列的间谍
-
“危险升级!”多方谴责美军袭击
-
袭击伊朗时,他们都在白宫战情室
-
内塔尼亚胡吹捧特朗普:大胆决定将改变历史
-
时隔14年,金爵奖再次颁给了中国女演员
-
印度又生一计,一盆冷水泼来...
-
特朗普威胁伊朗:要么是和平,要么是悲剧
-
“以色列嫌特朗普太磨叽,想提前对伊朗采取单独打击”
-
美国袭击伊朗三处核设施,“B-2轰炸机参与了”
-
美媒发现:两周是特朗普口头禅
-
伊朗福尔道核设施附近居民听到爆炸声
-
《纽约时报》:美国对伊朗开战
-
伊媒:遭袭核设施已提前转移核材料并疏散人员
-