亚洲电子体育

 

亚洲电子体育

🌏亚洲电子体育🌐     

“50万张英伟达卡计算是不可能在一个数据中心完成的,所以很多大模型计算跨域不可避免,但跨域以后对方是英伟达的卡吗?或者智算底层基础设施都不一定。这种情况下,我们需要什么?中间谁能把应用部署在算力上跑起来呢?”

近日,在蚂蚁数科举行的一场发布会上,中国信息通信研究院云大所副所长栗蔚指出,云原生凭借其高可用、弹性、可扩展等优势成为突破AI困境的关键,云原生PaaS平台的大模型产品工具链不断完善,将加速大模型技术在行业应用中落地。

据介绍,在AI时代,因为大模型对算力需求很大,GPT3.5的时候是1750亿参数,需要500个英伟达的卡,到了GPT5是10万亿的参数,需要50万张英伟达的卡。这种情况下,云将发挥出新的关键作用。

栗蔚表示,根据调研,云原生除了作用于AI之外,之前它作用于很多互联网应用的研发,超过一半中国企业大部分互联网化应用程序都是云原生的架构,甚至传统的核心架构现在也都在云化。

栗蔚给出答案,她认为,就是云,AI时代几个发展瓶颈问题基本都是要靠云原生满足的。云原生屏蔽了底层算力的差异,其应用不在乎你底下是CPU还是GPU,还是用了什么样的规格的卡,我只是将应用部署在上面,用你的计算能力,所以云原生发挥了这样的作用。

“很多企业通过用了云原生,对于底下上千台服务器进行统一的纳管,从而全方位提升效率和降低成本。”栗蔚强调,云跟AI结合才能充分降低AI的工程化成本,让AI大模型真实地跑起来变成服务。(完)

亚洲电子体育中新网6月29日电(中新财经记者 吴涛)“大模型的高速发展使得AI不得不面临算力管理复杂、训练推理成本高、任务调度难等多方面发展瓶颈。”

🌑(撰稿:福清)

本文来自网友发表,不代表本网站观点和立场,如存在侵权问题,请与本网站联系。未经本平台授权,严禁转载!
展开
支持楼主

99人支持

阅读原文阅读 2130回复 2
举报
    全部评论
    • 默认
    • 最新
    • 楼主
    • 宜旭诚🌒LV5六年级
      2楼
      知名民企46亿元“员工福利”爆雷🌓
      12-04   来自邵武
      3回复
    • 🌔苏华正LV6大学四年级
      3楼
      重庆大风掀走落地窗 像“开罐头”🌕
      12-04   来自武夷山
      9回复
    • 脚步🌖LV8幼儿园
      4楼
      六大行人均月薪酬不到3万元🌗
      12-02   来自建瓯
      4回复
    • 缘德亿LV2大学三年级
      5楼
      骑行博主在鳌太线一帐篷中发现遗体🌘
      12-02   来自永安
      6回复
    • 童年梦幻🌙🌚LV8大学三年级
      6楼
      大学生在便利店偷东西被学校开除🌛
      12-02   来自石狮
      6回复
    • 饮悦潮流LV3大学四年级
      7楼
      全乡18万救助金他套取了10万多🌜
      12-02   来自晋江
      回复
    你的热评
    游客
    发表评论
    最热圈子
    • #12306回应29元坐高铁免费吃40元盒饭#

      广卓达

      5
    • #幼儿园组织家长宣誓不给老师甩脸子#

      频宇

      8
    • #“妖股”暴跌99% 遭香港证监会点名#

      运益硕

      4
    • #大学生上演“黑吃黑”获刑

      轻翔

      2
    热点推荐

    安装应用

    随时随地关注亚洲电子体育

    Sitemap