找回密码
 加入怎通
查看: 270|回复: 6

文心一言发布在即 寒武纪思元590将迎首秀 百度:一定程度可替代A100(寒武纪思元270)

[复制链接]
我来看看 发表于 2023-03-18 00:18:48 | 显示全部楼层 |阅读模式
' ]+ E; X6 Y d* x O+ n0 P1 B% J

《科创板日报》3月15日讯(记者 郭辉) 科技产业的“大哉问”——从去年的“我们距离英伟达有多远”到今年“我们距离ChatGPT又有多远”,一直缺乏极具事实性的有力回答而随着百度即将于明日(16日)推出文心一言,百度方面关于国产最先进AI算力芯片思元590的使用体验也一并曝光,或为市场判断进一步提供依据。

# A! k1 `( G; ~/ e2 j

日前网络流传的一份百度集团交流纪要显示,“文心一言”将调用超大规模算力,并且尝试使用寒武纪思元590替代英伟达A100截至发稿,百度方面并未就纪要内容置评但据《科创板日报》记者与百度一位业务人士的交流了解,该项布局属实。

# a" }' G4 o( k7 h" _8 `. {9 N

寒武纪方面称思元590未正式发布,产品在百度相关项目中的应用需向公司业务部门了解,不过截至记者发稿,并未获得进一步回应纪要内容显示,疑为百度相关业务负责人回答称,同时选用英伟达与寒武纪等公司产品,是不愿被某一家供应商卡脖子。

/ t, Q; J; a7 x; ]. w

同时百度也希望进行一些备货,“除了英伟达A100和寒武纪思元590,其他性能差一点的替代品也考虑”对于供应商选择,该人士称在已经量产的情况下,会考虑到供应商自身业务体量和软件编程生态,并且在问答中详细比较了不同的国内厂商及其产品。

6 j4 A* V X$ S5 l

云端推理芯片方面,“从性能表现上,以算力功耗密度为比较的参数,第一梯队是阿里,第二梯队是百度、寒武纪、遂愿,第三梯队是依图从量产的成熟度考虑,已经量产并且已经对外独立商业输出的就是阿里、百度、寒武纪”不过百度没有选用阿里AI芯片,据称是由于市场反馈后者牺牲了通用性,导致使用场景相对较窄。

% c; C% ?( @' P, x; n, p

其中,百度方面以英伟达T4为标尺,认为百度、寒武纪、遂愿的云端推理芯片达到了英伟达T4性能水平据了解,英伟达A100 GPU 在BERT训练和推理上的性能分别较前代v100提升了6倍跟7倍,但英伟达t4推理能力只有v100的60%。

9 V$ l- n! g* _) {. t# x U. a5 j

图|英伟达Tesla T4及A100在BERT上训练和推理性能比较思元590是寒武纪最新一代云端智能训练芯片,该产品目前尚未正式发布但在2022年世界人工智能大会上,寒武纪董事长陈天石在演讲中透露了该产品信息。

8 d6 V; y. q6 C7 H

据介绍,思元590采用MLUarch05全新架构,实测训练性能较在售旗舰产品有大幅提升,能够提供更大的内存容量和更高的内存带宽,其IO和片间互联接口也较上代实现大幅升级如今看来,百度成为寒武纪思元590的首批尝鲜者,并且曝光产品首份“开箱”体验。

# Y5 J+ [& p7 `& E W5 C/ x

纪要显示,百度人士认为思元590能够在一定程度上代替A100,但在软件适配度、稳定性方面仍显不足“当时还没有出思元590的时候,我们认为(华为)昇腾910是国内唯一可以接近A100的卡”但从思元590目前在内部导入测试一些模型任务的完成进度来看,“优于昇腾910”。

# n6 ?8 i7 Q& E8 x5 C: ?1 @

纪要显示百度相关人士表示,尽管思元590和A100不好直接去点对点的对比,但在整体性能上——至少在AIGC这种业务对于算力的需求上,“可以一定程度上代替A100”“寒武纪基础软件平台的研发实力和相应的解决方案能力,是有大幅度提升的。

* u- O" n7 W+ S" c, n

在推理的加速引擎方面,从百度的视角来看,寒武纪所谓的MagicMind这套东西,可能觉得还是班门弄斧了,和百度相对比较健全的软件架构以及稳定性还有差距”寒武纪芯片究竟能否代替英伟达A100的问题,当事人怎么看?

# i7 _0 t- L6 e0 l

在今年的一场AI行业公开论坛中,寒武纪联合创始人、执行总裁王在曾表示,公司创新性架构已经在手机等硬件设备上得到了应用和验证,尤其是在2016年前后,寒武纪产品较英伟达更加高效但随着寒武纪有针对性地推出云端芯片,英伟达还是在过去几年中近乎独占了AI训练、推理市场。

; u8 F4 v' N* `! l. }$ U; b7 p, z

王在称,原因一方面是用户的使用习惯和迁移成本,另一方面还有易用性的问题“基于我们本身架构的稳健性,其实我们潜力是有的这几年寒武纪积累最多的,还是软件方面客户给予的反馈”王在表示:“我个人认为,现阶段寒武纪相关产品已经可以达到包括A100等产品的水平。

& U; C. M& h& }

”市场调查机构TrendForce此前公布的报告指出,如果以英伟达A100显卡的处理能力计算,运行ChatGPT将需要使用到3万块英伟达GPU有消息显示,刚刚发布的GPT-4将会达到100万亿参数,较ChatGPT所基于的GPT-3.5有着600倍的提升,对高性能算力芯片的需求将进一步提升。

1 Z# R" [" i6 A3 R* K

百度方面则为支持文心一言的超大规模计算需求,已于今年3月完成百度阳泉智算中心升级鲸平台智库专家、方融科技高级工程师周迪表示,通过降低成本、服务器响应时间,一定程度上能够换取算力芯片可控性“由于GPU并行算力的特点,当算力不足的时候可以通过堆叠GPU数量的方式来提高算力。

( `7 e: Z! W0 Y ? D% y

不过积极进行GPU堆叠并行的研究,寻求替代产品才是解决之道”

: U% A' B( `% P( g1 l4 _- q0 d7 g

海量资讯、精准解读,尽在新浪财经APP

) c4 y. c; `6 Y" \/ `4 Z9 E. ~2 o . m1 m2 T- ]0 g7 q5 t4 F- G: z- D$ a& L* b Z' |( ~5 @ & S2 E# h4 N4 r Y- D* p 8 p/ `2 f) A$ v: Z2 {) s
回复

使用道具 举报

风景 发表于 2026-01-05 02:12:34 | 显示全部楼层
这个分享太实用了,刚好能用到,感谢楼主!
回复

使用道具 举报

草原大肥狼 发表于 2026-01-08 22:22:47 | 显示全部楼层
学习到了,之前一直没注意过这个点,受教了
回复

使用道具 举报

13团舒妤 发表于 2026-01-09 00:38:46 | 显示全部楼层
蹲了这么久,终于看到有价值的讨论,支持一下!
回复

使用道具 举报

dpjanebass 发表于 2026-01-11 09:29:12 | 显示全部楼层
这个思路很新颖,打开了新世界的大门,谢谢分享
回复

使用道具 举报

xx520yi 发表于 2026-01-12 02:43:17 | 显示全部楼层
说得很实在,没有夸大其词,这种真实分享太难得了
回复

使用道具 举报

天涯人的时间 发表于 2026-01-12 21:26:07 | 显示全部楼层
完全赞同,我也是这么认为的,英雄所见略同~
回复

使用道具 举报

    您需要登录后才可以回帖 登录 | 加入怎通

    本版积分规则

    QQ|手机版|小黑屋|网站地图|真牛社区 ( 苏ICP备2023040716号-2 )

    GMT+8, 2026-7-8 17:21 , Processed in 0.045212 second(s), 24 queries , Gzip On.

    免责声明:本站信息来自互联网,本站不对其内容真实性负责,如有侵权等情况请联系420897364#qq.com(把#换成@)删除。

    Powered by Discuz! X3.5

    快速回复 返回顶部 返回列表