业界动态
仅用19天,马斯克建成全球最强“超算工厂”!10万块H100 GPU上线,Grok 3预计年底发布,训练,OpenAI,人类
2024-07-24 13:20:54
仅用19天,马斯克建成全球最强“超算工厂”!10万块H100 GPU上线,Grok 3预计年底发布,训练,OpenAI,人类

每经记(ji)者:文巧每经编辑:兰素英(ying)

只花了19天,“硅谷狂人马斯克就将“超级算(suan)力工厂”建成了!

当(dang)地时间7月22日,马斯克在(zai)X平台上发文称赞了xAI、X、英(ying)伟达(da),以及其他支持团队的工作,并表(biao)示,在(zai)当(dang)地时间凌(ling)晨4:20,这些团队合力打造的孟菲(fei)斯超级集群开始投入(ru)训练。

图片来源:X平台

该集群由10万块液冷H100芯片组成,是(shi)全球最强的超算(suan)集群。在(zai)同日接受著名(ming)心理(li)学教授乔丹·彼得森的专访时,马斯克透露(lu),从硬件安装到投入(ru)训练,总共只花了19天。

同时,他还在(zai)采访中(zhong)介绍,Grok 2的训练已(yi)经完成,将于(yu)下个(ge)月发布(bu)。目前,Grok 3正(zheng)在(zai)孟菲(fei)斯的超算(suan)中(zhong)心中(zhong)进行训练,预计年底将会发布(bu),届时将是(shi)市面上最强大的模(mo)型。

不过在(zai)访谈中(zhong),马斯克也坦言,自己对(dui)AI安全性的忧虑日益加剧。他认为(wei),AI必须基于(yu)“亲人类”的原则,但其他公司更想要创造的是(shi)比任何人类都聪明得多的数字超级智能,而(er)这并不是(shi)一个(ge)好事。

谈xAI:“超算(suan)中(zhong)心”仅用19天就投入(ru)训练,Grok 3预计年底发布(bu)

当(dang)下,xAI旗下的Grok正(zheng)与(yu)谷歌Gemini及OpenAI的ChatGPT等产品(pin)展开激烈竞争。乔丹·彼得森在(zai)采访一开始就抛(pao)出一个(ge)尖锐的问题,询问马斯克如何比较Grok和ChatGPT现在(zai)的表(biao)现。

马斯克评价称,目前搭载在(zai)X平台上的基础Grok模(mo)型并不是(shi)很强,比ChatGPT要弱上一个(ge)量级。他表(biao)示:“X是(shi)一家相当(dang)新的公司,它(ta)才成立一年多一点,所(suo)以我们有很多工作要做,才能赶上那(na)些已(yi)经成立了5年,10年或是(shi)20年的公司。”

他随后补充道(dao):“我们正(zheng)在(zai)快速(su)追赶,我认为(wei)xAI的改进速(su)度(du)比其他任何公司都快,我们建造了一个(ge)大型训练中(zhong)心,从硬件安装到投入(ru)训练只花了19天。

《每日经济(ji)新闻》记(ji)者注意到,孟菲(fei)斯“超算(suan)工厂”拥有10万块液冷H100 GPU,在(zai)单个(ge)RDMA结构(即远程(cheng)直(zhi)接数据存取(qu)结构)上运行,是(shi)全球最大的超算(suan)集群。按照成本估算(suan),每块H100的价格约为(wei)3万~4万美元。这也就意味着,马斯克的“超算(suan)工厂”价值将达(da)30亿~40亿美元(约合人民(min)币218亿~290亿元)。从算(suan)力上来看,OpenAl GPT-4的训练用了25000块A100 GPU,约为(wei)“超算(suan)工厂”的1/20。

当(dang)被问及xAI的下一代(dai)模(mo)型时,马斯克称,Grok 2最近完成了训练,工程(cheng)师正(zheng)在(zai)修复漏洞,下个(ge)月就能正(zheng)式发布(bu)。

谈及其性能,马斯克透露(lu)道(dao):“它(ta)(Grok2)应该与(yu)ChatGPT最新的模(mo)型(GPT-4)相当(dang)。我们正(zheng)在(zai)孟菲(fei)斯数据中(zhong)心训练Grok 3,大概需要三四个(ge)月的时间来进行调整和修复错误。我们希望能在(zai)12月之前发布(bu)Grok 3,到那(na)时Grok 3应该是(shi)世界(jie)上最强大的AI。”

图片来源:乔丹·彼得森访谈截图

谈AI风险:AI必须基于(yu)“亲人类”原则

在(zai)访谈中(zhong),马斯克也坦言,自己对(dui)AI安全性的忧虑日益加剧。他认为(wei),所(suo)有的AI公司想要创造的是(shi)比任何人类都聪明得多的数字超级智能,而(er)这并不是(shi)一个(ge)好事。

在(zai)马斯克看来,AI必须基于(yu)“亲人类”的原则。他告诉彼得森,在(zai)与(yu)谷歌的前首席执行官拉里·佩(pei)奇讨(tao)论相关话题后,他越来越担(dan)心AI的安全问题了。“他(佩(pei)奇)称我为(wei)物种歧视者(speciesist)。我确实是(shi)个(ge)物种歧视者,我支持人类而(er)不是(shi)机器。拉里的观点则是(shi),我们以后都会将我们的思想上传(chuan)到电脑上,每个(ge)人都会变成机器。”他说道(dao)。

马斯克进一步表(biao)示:“不支持人类是(shi)一件疯狂的事情。我的意思是(shi),如果人类不加入(ru)人类阵营,那(na)谁会加入(ru)呢?这是(shi)压死骆(luo)驼的最后一根稻草。我想,我们真的需要一些新的AI公司,这样才能与(yu)谷歌抗衡。”而(er)这也是(shi)Grok的使命所(suo)在(zai),和带有“觉醒病毒”的ChatGPT和Gemini展开竞争。

实际上,正(zheng)是(shi)有关AI安全的讨(tao)论促使马斯克和山姆·阿尔特曼于(yu)2015年共同创立了OpenAI。不过,2018年马斯克和后者理(li)念不和,离开OpenAI,最终创立了自己的AI聊天机器人Grok,并多次批评OpenAI背离初衷(zhong)。

他认为(wei),OpenAI应该是(shi)作为(wei)一个(ge)开源的非营利性的组织。OpenAI中(zhong)的“Open”是(shi)指“开源”,而(er)OpenAI现在(zai)真正(zheng)想要实现的是(shi)利润最大化,并非尝试(shi)去(qu)解决(jue)一些真正(zheng)的问题。

马斯克透露(lu),“我仍在(zai)考虑提(ti)起法律诉讼,至少(shao)可以让法庭(ting)向我解释,我所(suo)资(zi)助的组织为(wei)何能实现截然相反的目标。

每日经济(ji)新闻

发布(bu)于(yu):四川省(sheng)
版权号:18172771662813
 
    以上就是本篇文章的全部内容了,欢迎阅览 !
     资讯      企业新闻      行情      企业黄页      同类资讯      首页      网站地图      返回首页 移动站 , 查看更多   
sitemapsitemap1sitemap2sitemap3sitemap4sitemap5sitemap6sitemap7