您现在的位置:主页 > 科技 >

华为云CTO张宇昕:大模型时代需要全新的网络互联技术

标签: 日期:2024-02-26 11:01来源:未知作者:admin
华为云CTO张宇昕在巴塞罗那华为云峰会表示,大模型时代对算力有着全新的要求:1、联算比。未来需要全新的网络互联技术来解决运算量和GPU算力之间的巨大差距。2、容算比。当前在模型训练过程中为获取足够显存容量,存在不必要的GPU算力闲置。3、存算比。当前

  华为云CTO张宇昕在巴塞罗那华为云峰会表示,大模型时代对算力有着全新的要求:1、联算比。未来需要全新的网络互联技术来解决运算量和GPU算力之间的巨大差距。2、容算比。当前在模型训练过程中为获取足够显存容量,存在不必要的GPU算力闲置。3、存算比。当前在模型训练过程中,大量的时间消耗在GPU数据加载,造成算力的进一步浪费。基于此,云的系统架构将从“以CPU为中心的主从架构”向“多元算力对等架构” 跃迁,突破算力、存储和网络的边界,实现多元算力的对等全互联。

顶一下
(0)
0%
踩一下
(0)
0%
相关文章
共有人强势围观,期待你的评论!评论区
小提示: 本站的评论不需要审核,即发即显,有什么话你就尽管说吧,但不要过激哦,以免遭跨省处理!

验证码:点击我更换图片 匿名评论
最新评论