当前位置:首页 > 元宇宙 > AI

华为云新一代昇腾 AI 云服务全面上线:首创将 384 颗昇腾 NPU 和 192 颗鲲鹏 CPU 全对等互联

来源: 责编: 时间:2025-06-24 09:33:51 137观看
导读 6 月 20 日消息,在今日举行的华为开发者大会 2025(HDC 2025)上,华为常务董事、华为云计算 CEO 张平安宣布基于 CloudMatrix384 超节点的新一代昇腾 AI 云服务全面上线,为大模型应用提供“澎湃算力”。随着大模型训

6 月 20 日消息,在今日举行的华为开发者大会 2025(HDC 2025)上,华为常务董事、华为云计算 CEO 张平安宣布基于 CloudMatrix384 超节点的新一代昇腾 AI 云服务全面上线,为大模型应用提供“澎湃算力”。VPq28资讯网——每日最新资讯28at.com

VPq28资讯网——每日最新资讯28at.com

随着大模型训练和推理对算力需求的爆炸式增长,传统计算架构已难以支撑 AI 技术的代际跃迁。华为云新一代昇腾 AI 云服务基于 CloudMatrix384 超节点,首创将 384 颗昇腾 NPU 和 192 颗鲲鹏 CPU 通过全新高速网络 MatrixLink 全对等互联,形成一台超级“AI 服务器”,单卡推理吞吐量跃升到 2300Tokens / s。VPq28资讯网——每日最新资讯28at.com

VPq28资讯网——每日最新资讯28at.com

超节点架构能更好地支持混合专家 MoE 大模型的推理,可以实现“一卡一专家”,一个超节点可以支持 384 个专家并行推理,提升效率。同时,超节点还可以支持“一卡一算力任务”,灵活分配资源,提升任务并行处理,减少等待,将算力有效使用率(MFU)提升 50% 以上。VPq28资讯网——每日最新资讯28at.com

对于万亿、十万亿参数的大模型训练任务,在云数据中心,还能将 432 个超节点级联成最高 16 万卡的超大集群;同时,超节点还可以支持训推算力一体部署,如“日推夜训”,训推算力可灵活分配,帮助客户资源使用最优。VPq28资讯网——每日最新资讯28at.com

VPq28资讯网——每日最新资讯28at.com

新浪与华为云深度合作,基于 CloudMatrix384 昇腾 AI 云服务,为“智慧小浪”智能服务体系构建了统一的推理平台,底层由昇腾 AI 算力提供支持。推理的交付效率提升了超过 50%,模型上线速度成倍加快;通过软硬协同调优,NPU 利用率提升超过 40%。VPq28资讯网——每日最新资讯28at.com

硅基流动正在使用 CloudMatrix384 超节点,为数百万用户高效提供 DeepSeekV3、R1 的推理服务。面壁智能使用 CloudMatrix384 超节点,让他们的小钢炮模型的推理业务性能得到了 2.7 倍提升。VPq28资讯网——每日最新资讯28at.com

在科研领域,中国科学院基于 CloudMatrix384 超节点打造了自己的模型训练框架,快速构建了中国科学院 AI forScience 科研大模型,摆脱了对国外高性能 AI 算力平台的依赖。VPq28资讯网——每日最新资讯28at.com

在互联网领域,360 打造的纳米 AI 搜索,为用户提供超级 AI 搜索服务,也已开启了 CloudMatrix384 超节点的测试。VPq28资讯网——每日最新资讯28at.com

从大会获悉,当前,昇腾 AI 云服务为超过 1300 家客户提供 AI 算力。VPq28资讯网——每日最新资讯28at.com

VPq28资讯网——每日最新资讯28at.com

VPq28资讯网——每日最新资讯28at.com

华为开发者大会 HDC 2025 专题VPq28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-45-14001-0.html华为云新一代昇腾 AI 云服务全面上线:首创将 384 颗昇腾 NPU 和 192 颗鲲鹏 CPU 全对等互联

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 华为云发布盘古大模型 5.5:自然语言处理等五大基础模型全面升级

下一篇: 华为鸿蒙智能体框架 HMAF 发布,首批 50+ 鸿蒙智能体即将上线

标签:
  • 热门焦点
  • 元宇宙终究没火过两年

    来源:传播体操在ChatGPT快速破圈的同时,元宇宙的热度却一泻千里。虽然互联网大厂们都没有否认元宇宙的长期想象力,但在行动上却都纷纷表示了对元宇宙短期前景的悲观。号称改变
  • 雷克萨斯高管,“受贿”5000万?

    来源:毒舌科技作者:潘磊雷克萨斯的高管,好像出事了。五六家日本小媒体,突然曝出了一个与中国市场有关的大新闻——雷克萨斯中国区一个高管受贿10亿日元(约合人民币5000
  • 林俊杰、余文乐等明星相继入局,元宇宙虚拟土地究竟有何魔力?

    上周的元宇宙和明星圈因为一则“林俊杰在推特上宣布持有Decentraland元宇宙虚拟地块”的新闻而备受关注,该新闻一方面在娱乐圈引起了吃瓜群众的好奇,另一方面在
  • 元宇宙社交啫喱、希壤爆款迭出,腾讯慌了吗?

    文 | 陈桥辉没想到腾讯超级QQ秀的20周年归来首秀,被一款名不见经传的产品抢了风头。1月15日,一款名为“啫喱”的社交App迅速在各个互联网的社交圈内火爆起来,引起
  • Web3 去中心化身份管理系统的历史、现状与展望

    身份、数字资产和在线资料的映射最近在区块链行业获得了极大的关注。新技术正在形成架构,这将进一步为去中心化和以用户为中心的机制铺平道路。本文将讨论以下
  • 以太坊升级将会带来的5个改变

    以太坊自2015年诞生以来就广受欢迎,但最近其昂贵的交易费用和低可扩展性对执行复杂的应用程序产生了负面作用,用户对以太坊改进的需求也日益急迫。以太坊2.0已进
  • 2022年元宇宙系列报告:UGC当道,XR带来新交互体验

    UGC作为元宇宙的主要内容创作模式,已经越来越多的呈现于游戏、娱乐、社交、传媒等方面,UGC模式勾勒了元宇宙的边界,现今元宇宙UGC模式的主要呈现方式以元宇宙概念
  • Steam 禁止NFT和加密货币原因曝光

    近日,Valve(V社)总裁Gabe Newell接受PC Gamer采访时解释了该平台禁止NFT和加密货币的原因。早在2021年10月18日,PC Gamer就报道Steam推出的新规:使用区块链或允许交
  • 元宇宙收割了谁

    作者:晓宇资本将元宇宙看作下一代互联网的门票,画大饼、割韭菜就成了一大选项。2021年被称为元宇宙元年。在这一年里,先是号称元宇宙第一股的沙盒游戏Roblox盛装
Top