有钱也不一定买到!英伟达GPU今年发货 成本和能耗较前代改善25倍
快科技3月19日消息,有钱也在整个AI算力硬件的定买到英代改搭建中,英伟达毫无疑问站在最顶端,伟达其GPU的今较前动态发展,直接关乎了行业的年发能耗发展。
在今天开幕的货成GTC 2024上,黄仁勋带来了新的本和B200 GPU,其拥有2080亿个晶体管,善倍可提供高达20petaflops的有钱也FP4算力。
至于GB200,定买到英代改就是伟达将两个GPU和一个Grace CPU结合在一起,可为LLM推理工作负载提供30倍的今较前性能,同时还可能大大提高效率。年发能耗
英伟达也形象给出了提升的货成高度,比如训练一个1.8万亿个参数的本和模型以前需要8000个Hopper GPU和15兆瓦的电力。如今,2000个Blackwell GPU就能完成这项工作,耗电量仅为4兆瓦。
在具有1750亿个参数的GPT-3 LLM基准测试中,GB200的性能是H100的7倍,而训练速度是H100的4倍。这些显著性能的提升下,新一代 NVLink交换机起到了关键效果,可让576个GPU相互连接,双向带宽达到每秒1.8TB。
按照黄仁勋的说法,搭载B200芯片的GB200 Grace Blackwell计划今年晚些时候发货,英伟达目前并未公布GB200以及整套方案的售价信息,但目前的现状是有钱你也不一定能买到,中国厂商也是看看就行了。
黄仁勋表示,Blackwell带来了令人难以置信的兴奋”:我们将会把Blackwell推广给全球的AI公司,全球各地都在签约启动Blackwell,这款Blackwell将成为我们历史上最成功的产品发布。”Blackwell平台能够在万亿参数级的大型语言模型(LLM)上构建和运行实时生成式AI,而成本和能耗比前身低25倍。
(责任编辑:资讯)
- ·英国部长们敦促保护创意人员作品被AI公司使用
- ·小米再上「新层次」:小米14 Ultra开启移动影像新篇章,「人车家全生态」全面展开
- ·Midjourney计划在6个月内开放API 视频功能会推迟到V7模型
- ·考虫工作人员回应倒闭传闻:确实在走清算流程
- ·湖北多地下冻雨 车子像被包浆一样:裹了一层“胶”
- ·Chrome 获得由 Gemini 提供支持的内置 AI 写作工具
- ·英伟达市值周四大增2700亿美元 比英特尔市值还高900多亿美元
- ·周鸿祎称已拜俞敏洪为师:努力在网红领域取得一席之地
- ·支持534种语言,开源大语言模型MaLA-500
- ·高合汽车停工停产6个月!创始人致歉:用老一套打不过互联网