当前位置:首页 > 科技  > 芯片

国内AI算力租赁需求激增,NVIDIA加速卡涨价成常态

来源: 责编: 时间:2023-12-05 17:11:27 363观看
导读由于国内大型语言模型(LLM)的爆发式增长,AI算力基础硬件设施无法满足需求,导致国内科技大厂如腾讯、阿里巴巴、华为等纷纷向算力租赁业者求助。其中,国内网络安全厂商也跨界提供GPU算力租赁服务。据报道,由于NVIDIA多款高端

由于国内大型语言模型(LLM)的爆发式增长,AI算力基础硬件设施无法满足需求,导致国内科技大厂如腾讯、阿里巴巴、华为等纷纷向算力租赁业者求助。其中,国内网络安全厂商也跨界提供GPU算力租赁服务。9Gc28资讯网——每日最新资讯28at.com


9Gc28资讯网——每日最新资讯28at.com

据报道,由于NVIDIA多款高端人工智能(AI)GPU芯片出口受限,国内科技大厂在AI算力告急的情况下,不得不向国内算力租赁业者求助。国内算力租赁大厂汇纳科技公告称,由于算力需求大幅增加、算力资源持续紧张,该公司内建NVIDIA A100芯片的高消能服务器算力供应,收费将上调100%。9Gc28资讯网——每日最新资讯28at.com


9Gc28资讯网——每日最新资讯28at.com

在市场涌现出的强大需求下,拥有GPU资源的企业也纷纷下海,跨界布局算力租赁。一家网络安全一线大厂相关人士向媒体表示,该公司也在做算力租赁,主要以NVIDIA的A100/A800加速卡为主。9Gc28资讯网——每日最新资讯28at.com


9Gc28资讯网——每日最新资讯28at.com

由于ChatGPT引发的大型语言模型(LLM)风潮横扫国内市场,LLM训练的参数量与训练时的数据量双双提升后,亟需更大的算力布局。但当AI推论情境和需求成长后,国内的算力基础硬件设施无法跟上LLM的需求爆发。9Gc28资讯网——每日最新资讯28at.com


9Gc28资讯网——每日最新资讯28at.com

由于NVIDIA高端AI GPU遭到美国政府断供,再加上新一代国内特供版芯片还不确定,在当前国内的AI算力告急下,厂商瞄准多元算力,表示国内本土芯片已在不断升级中,将和国产高端芯片业者保持密切联系。9Gc28资讯网——每日最新资讯28at.com


9Gc28资讯网——每日最新资讯28at.com

尽管包括华为昇腾、壁仞科技、摩尔线程等国内本土芯片业者陆续获得厂商采用测试的机会,但对于国内AI服务器发展熟稔的浪潮信息资深副总裁刘军,日前在“2023年人工智能计算大会”(AICC 2023)上坦承,要实现多元算力的挑战不小。刘军指出,全球高端AI训练芯片目前已经超过40款左右,但因为每家厂商在开发过程中采用的技术路线不一样,所以在接口互连等方面还存在较多不兼容之处,这也使得AI算力系统整个开发配置周期拉长、定制化开发投资过大、从既有厂商迁移到国内本土方案的转换时间过久等挑战。9Gc28资讯网——每日最新资讯28at.com


9Gc28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-27-38260-0.html国内AI算力租赁需求激增,NVIDIA加速卡涨价成常态

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 国内AI需求飙升,打破单芯片效能瓶颈成未来要务

下一篇: AMD利用PyTorch与ROCm,为显示卡注入AI研发新动力

标签:
  • 热门焦点
  • Redmi Pad评测:红米充满野心的一次尝试

    从Note系列到K系列,从蓝牙耳机到笔记本电脑,红米不知不觉之间也已经形成了自己颇有竞争力的产品体系,在中端和次旗舰市场上甚至要比小米新机的表现来得更好,正所谓“大丈夫生居
  • 把LangChain跑起来的三个方法

    使用LangChain开发LLM应用时,需要机器进行GLM部署,好多同学第一步就被劝退了,那么如何绕过这个步骤先学习LLM模型的应用,对Langchain进行快速上手?本片讲解3个把LangChain跑起来
  • K8S | Service服务发现

    一、背景在微服务架构中,这里以开发环境「Dev」为基础来描述,在K8S集群中通常会开放:路由网关、注册中心、配置中心等相关服务,可以被集群外部访问;图片对于测试「Tes」环境或者
  • 小米公益基金会捐赠2500万元驰援北京、河北暴雨救灾

    8月2日消息,今日小米科技创始人雷军在其微博上发布消息称,小米公益基金会宣布捐赠2500万元驰援北京、河北暴雨救灾。携手抗灾,京冀安康!以下为公告原文
  • 信通院:小米、华为等11家应用商店基本完成APP签名及验签工作

    中国信通院表示,目前,小米、华为、OPPO、vivo、360手机助手、百度手机助手、应用宝、豌豆荚和努比亚等9家应用商店,以及抖音和快手2家新型应用分发平
  • iQOO Neo8系列新品发布会

    旗舰双芯 更强更Pro
  • Android 14发布:首批适配机型公布

    5月11日消息,谷歌在今天凌晨举行了I/O大会,本次发布会谷歌带来了自家的AI语言模型PaLM 2、谷歌Pixel Fold折叠屏、谷歌Pixel 7a手机,同时发布了Androi
  • 上海举办人工智能大会活动,建设人工智能新高地

    人工智能大会在上海浦江两岸隆重拉开帷幕,人工智能新技术、新产品、新应用、新理念集中亮相。8月30日晚,作为大会的特色活动之一的上海人工智能发展盛典人工
  • 北京:科技教育体验基地开始登记

      北京“科技馆之城”科技教育体验基地登记和认证工作日前启动。首批北京科技教育体验基地拟于2023年全国科普日期间挂牌,后续还将开展常态化登记。  北京科技教育体验基
Top