马斯克重磅出击:豪掷40亿购H100训练Grok 3,Grok 2下月发布,剑指OpenAI!

10个月前发布AI俱乐部
2 0 0
标签:
马斯克重磅出击:豪掷40亿购H100训练Grok 3,Grok 2下月发布,剑指OpenAI!的封面图

据悉,特斯拉正在使用40个训练集群,每个集群包含10个H100芯片,据称是为了训练xAI的Grok3!这种”巨额”的算力投入并非用于日常推理和微调,而是用于AI模型的大规模训练。

此前,有报道称xAI使用了大约4个集群,相当于8个A100的算力,来训练Grok2,而现在用于训练Grok3的H100数量增加至10个集群。这可能意味着更复杂的模型训练,旨在与OpenAI的GPT等领先AI模型竞争。

尽管Grok1.5已经问世,但特斯拉似乎已将重心转向AI模型能力的进一步提升。Grok是特斯拉构建更强大的AI驾驶系统的关键,与其他公司如OpenAI、谷歌、Meta等在AI领域展开竞争。这一切都表明,算力投入与技术发展密不可分。

大约3周前,xAI发布了Grok1.5的更新,并推出了视觉能力更强的Grok1.5Vision版本。据xAI介绍,Grok1.5V能够处理实时视觉信息,比如分析图表、阅读文档,甚至理解用户上传的截图内容。

5月,xAI宣布开源Grok,成为首个开源的大型语言模型,与谷歌Deepmind和OpenAI等公司有所不同。xAI此举旨在促进AI技术的发展,并希望通过开源社区的力量来改进和优化模型。

此前,xAI的Grok2使用了8个A100进行训练,这已经是相当惊人的资源投入,可以更好地理解”世界模型”,以及提升长期语境的处理能力。这种对先进AI模型的持续投入表明了对技术前沿的追求。

特斯拉的目标是,Grok3能够利用超过10个高端H100GPU集群进行训练,从而实现”数量级的提升”。这种规模的计算资源对于推动AI的发展至关重要,能够帮助特斯拉实现AI的目标和愿景。

xAI的Grok2和Grok3的训练规模表明,先进AI模型的发展需要大量的H100芯片资源。尽管Meta也在其基础设施中部署了大量的GPU,但xAI似乎更加专注于AI模型的训练。

总而言之,特斯拉正在大力投资xAI的能力,持续提升AI系统的性能。随着算力需求的不断增长,未来的AI发展将更加依赖于强大的计算资源。

快讯中提到的AI工具

xAI
xAI

探索科学与宇宙奥秘的AI公司

OpenAI
OpenAI

致力于创造对全人类有益的安全 AGI

© 版权声明:
本文地址:https://aidh.net/kuaixun/0j1sjqiv

暂无评论

none
暂无评论...