虽然谷歌早在2020年,就在自家的数据中心上部署了当时最强的AI芯片——TPU v4。
但直到今年的4月4日,谷歌才首次公布了这台AI超算的技术细节。
Google 4日发布论文,公开其中一部AI超级计算机的详细资讯,声称比竞争对手Nvidia的系统运算更快、功耗更低。
Google已经构建一套系统,其中包括超过4,000个TPU,并结合执行和训练AI模型的定制化零件,这部以TPU为基础的AI超级计算机称为TPU v4。它从2020年开始运行,用于训练自家PaLM模型超过50天。
“在性能、可扩展性、可用性上TPU v4成为大型语言模型的主力”,Google研究人员表示,TPU v4能比Nvidia A100组成类似大小的系统,运算快1.2~1.7倍,功耗低1.3~1.9倍。不过,Google的TPU并未与Nvidia最新AI芯片H100进行比较,因为后者推出不久,且采用更先进的制程。
另一方面,由学术界和产业人士组成的人工智能领袖联盟制定出MLPerf基准,在5日公布全产业AI芯片测试结果和排名。对此Nvidia首席执行官黄仁勋表示,Nvidia H100的测试结果明显优于上一代。
“今日MLPerf 3.0突显出以Hopper架构为基础的H100,其性能是A100的4倍”,黄仁勋在官方博客写道,并认为下一阶段的生成式AI(Generative AI)需要新的基础设施,以训练高性能的大型语言模型。
AI所需的大量算力是相当昂贵的,于是Nvidia、Google等产业人士大多专注于开发新的芯片、光学连接零件等,或从软件技术方面着手,以减少大量运算所需的功耗。
Google被认为是AI领域的主要先驱,旗下研究人员在过去10年已经取得重要进展。然而随着OpenAI推出ChatGPT,引爆人工智能热潮,部分人士认为GoogleAI技术商业化方面明显落后,这也迫使Google现在竞相发布产品并试图证明没有挥霍领先优势。
原标题:在成都,探索大运之城的科技创新这是7月22日在成都高新体育中心多功能馆外拍摄的临时训练气膜馆(无人机照片)。
2023-07-25 08:39:57探索大运之城的科技创新冬天来了,你是否感觉到了寒冷的气息?今年进入12月以来,我国遭遇了多次寒潮和冷空气的侵袭,导致中东部地区气温频繁下降,甚至出现了罕见的雨雪冰冻天气。
2023-12-25 13:05:21大范围大回暖开始原标题:31省份前三季度人均可支配收入公布 上海北京超6万元国家统计局网站最新公布了31个省份前三季度居民人均可支配收入情况。
2023-10-30 16:03:4431省份前三季度人均可支配收入公布原标题:谷歌宣布量子计算机新突破:经典超算需47年的任务可在几秒内完成IT之家7月5日消息,谷歌科学家近日在ArXiv平台上发布预印本论文,表示在量子计算机方面取得重大突破
2023-07-05 16:06:17谷歌披露量子计算机新突破近日,有消息称英伟达公司的H100 AI GPU的利润率高达1000%,这一数字可能让人们感到震惊。
2023-08-18 14:36:07英伟达H100【#投资者押注美联储明年中期将降息##国际油价累计跌超15%#】上周公布的一系列经济数据显示美国通胀持续降温、经济增长放缓
2023-11-20 13:34:14国际油价累计跌超15%