TPU v4 芯片算力刷新高!谷歌建全球最大机器学习中心

规模弹性: 管理谷歌的TPUv4机器学习超级计算机 为了帮助解决碎片化问题,Borg Prime 还可以选择抢先处理正在运行的工作负载(例如,将多个子cube工作负载迁移到更少的cube中,或将多cube工作负载迁移到不同的 pod 中,以便容纳非常大的工作负载)。需要注意的是,由于连接的 ICI 和 OCS 具有相同的 {dim,index} 参数,如果一个 OCS 不可用,每个cube都会观察到一个具有相同 {dim,index} 参数的 ICI 链接断开。如果没有 TPUv4 基于 OCS 的可重构性,随着计算资源规模的扩大,作业可用性会迅速下降。 阅读详情

ab7bf896f8e647e77c4ea5373b79a24d.png

转自 | 新智元

编辑 | 拉燕 David

搞机器学习模型训练,算力不行,不行。谷歌Cloud TPU v4 Pods预览版最新发布,算力再刷新高。

最近,在谷歌的I/O开发者大会上,谷歌除了发布令人眼花缭乱的新手机、AR眼镜和全家桶软件升级之外, 还为全球的机器学习玩家带来了一发「重磅炸弹」。

一年前亮相的TPU v4,已经正式部署在谷歌云机器学习集群上了。这件机器学习「大杀器」,已经正式用在了Google Cloud最新机器学习集群的预览版上。

谷歌表示,它将成为世界上最大的公开机器学习中心。

目前,除了最新的Google Cloud预览版外,谷歌其余SOTA级别的产品,比如搜索引擎、视频网站Youtube等等,都应用了TPU处理器(即张量处理单元)。

划时代的TPU v4,碾压v3

 TPU v4是谷歌在去年的I/O大会上推出的芯片。

在当时的开发者大会上,谷歌CEO Sundar Pichai花了1分42秒的时间介绍了这款芯片。

1aa029a1a96c2e47643c5b870d727def.png

TPU v4是谷歌的第四代定制AI芯片,其算力是上一版本v3的两倍。性能相比前一代也提升了十倍多。

可以说,TPU v4芯片给谷歌谷歌云平台补上了十分关键的一环。机器学习的训练速度得以显著提升。

量化来看,4096个v4 TPU,即一个pod的芯片,就可以提供超过一个exaflop(百亿亿浮点运算)的AI计算能力。

可能上述数据还不够直观。对比来看,一个TPU pod的计算能力如果达到了每秒百亿亿次浮点计算的级别,相当于一千万台笔记本电脑之和。

以前要想获得1个exaflop(每秒 10 的 18 次方浮点运算)的算力,通常需要建立一个定制的超级计算机。

TPU是谷歌的第一批定制芯片之一,当包括微软在内的其他公司决定为其机器学习服务采用更灵活的FPGA时,谷歌很早就在这些定制芯片上下了赌注。

谷歌早已部署了许多这样的计算机,在他们的数据中心有几十个TPU v4 pods。

a765b0162b61abe168be086134cd9570.png

此外,最重要的是,谷歌这些数据中心将以90%或接近90%的无碳能源运行。

看来,TPU v4不光性能强大,还环保。

Google Cloud最新预览版!

在最近的谷歌I/O开发者大会上发布的Google Cloud最新机器学习集群的预览版可谓是会上的一大亮点。

02a7b5967b578ff75d6c13ca22c75fa2.png

谷歌表示,「客户对机器学习的容量、性能和规模的需求一直在快速增长。为了支持AI的下一代基础性进步,我们推出了谷歌云机器学习集群。其中就包括预览版的Cloud TPU v4 Pod。」

faa1401dce86c70dde2abec820b8b928.png

谷歌毫不客气的表示,「这就是世界上最快、最高效和最可持续的机器学习基础设施中心。」

在Cloud TPU v4 Pods的支持下,研究和开发人员能够训练日益复杂的模型,来支持诸多算法系统。

比如,NLP(大规模自然语言处理)、推荐系统和计算机视觉算法等等。

谷歌表示,在算力最高可达9 exaflops的峰值聚合性能下,Cloud TPU v4 Pods集群在算力方面是全世界最大的公开可用的机器学习中心。

ecc0d3896a5d5d371177e43730ac5859.png

而且别忘了上面说过的,不光算力强,还环保。

谷歌数据中心的Matt Eastwood表示,「我们最近对2000名IT从业者进行了调查。我们发现,基础设施算力不足往往是AI项目失败的根本原因。」

「这也正是我们要推出Cloud TPU v4 Pods的原因。再加上我们能够做到90%的操作由无碳能源提供动力,说明我们不光在拔高算力水平,还同时关注可持续性。」

f81b9acb9bcd264b9999b67330009684.png

这其实很好理解。哪怕算力再强,如果耗能过大,也不会是长久之计。

既然聊到了可持续性,就再多说点有关该集群对能源利用的高效性。

除了上述提到的清洁能源供应外,谷歌数据中心的电源使用效率(PUE)等级为1.10。

而且,TPU v4芯片每瓦特最大功率的峰值Flop还是上一代的3倍。

941a6048d7a2eeb1e974e70bcbdadc29.png

在去年推出这款芯片的时候,谷歌就承诺会在去年年底前推广。当时,谷歌就给了一些AI巨头使用许可,包括Cohere、LG AI研究中心、Meta、Salesforce等等。

谷歌表示,用户很喜欢新款芯片的性能和可扩展性,TPU v4的快速互连和优化的软件堆栈满足了他们的需求。客户可以通过该芯片优良的架构构建各自的交互发展环境。

并且,因为TPU v4的灵活性,这款芯片也能完美的契合到客户使用的框架中,包括JAX、Pytorch、TensorFlow等等。

这些特点让研究人员能不断推动AI的发展,训练大规模的SOTA机器学习模型。

几年前谷歌还成立了TRC,即TPU Research Cloud项目,给机器学习的从业人员提供了极强的算力支持。

90da41ad31c320aa7d7dded23ba29f70.png

凭借谷歌推出的芯片架构,开发人员得以实现自己的各种奇思妙想。

比方说,有人用AI写波斯语诗集,有人利用计算机视觉和行为遗传学来研究睡眠和运动引起的疲劳的区别等等。

51f0693574c82442a8e5a6c38d02f780.png

用AI写的波斯语诗篇

谷歌副总裁、人工智能研究中心的Jeff Dean表示,「Cloud TPU v4是一个里程碑式的产品。我们相信,有了它,未来我们可以和全球的机器学习开发人员开展更多合作,让AI造福整个世界。」


感谢你的分享,点赞,在看三连  a90744053c432e703951ed744d2033dd.gif

规模弹性: 管理谷歌的TPUv4机器学习超级计算机(二) 有趣的是,扭曲环显示出更好的恢复能力,在出现不可用 OCS 的情况下,4x4x8 的性能略有提高。这种平衡在普通环中是不可能实现的。这代表了与我们不同的设计点:与引入分组交换机相比,OCS 简化了 ICI 网络设计,因为它建立了专用物理通道,无需控制共享流量,同时较低的采购价格和待机功率也降低了运营成本[20]。例如,在一个 8x8x8 的环中,将一个数据包从源点(x = 1,y = 0,z = 0)路由到目的地(x = 5,y = 0,z = 0),在 X + 或 X - 方向上可以走 4 跳。 阅读详情

相关推荐

AI芯片与算力实战指南:从GPU/NPU/ASIC选型到环境搭建与优化

在人工智能领域,算力是驱动模型训练与推理的核心引擎,其本质是通过专用硬件高效处理海量并行计算任务。从原理上看,现代AI计算主要依赖矩阵乘加等张量运算,这催生了GPU、NPU、ASIC等专用芯片的演进,它们通过并行计算架构、高带宽内存和定制化电路设计,实现了计算效率的数量级提升。在技术价值层面,强大的算力不仅加速了模型迭代,更使得百亿参数大模型成为可能,直接推动了AI技术的实用化与规模化。应用场景覆盖了从云端数据中心的大规模训练,到边缘设备的实时推理。本文聚焦于AI芯片的实战选型,深入对比了GPU、NPU和A

weixin_34226182的博客 413

【论文评析】TPU v4:用于机器学习的光学可重构超级计算机,具有嵌入的硬件支持

题目:TPU v4: An Optically Reconfigurable Supercomputer for Machine Learning with Hardware Support for Embeddings名称:TPU v4:用于机器学习的光学可重构超级计算机,具有嵌入的硬件支持单位:谷歌会议:ISCA 2023。

zq563100792的博客 1862

Google AI Studio三模式工作流:Chat→Build→Stream原型开发全解析

AI原型开发正从‘写代码’转向‘定义价值’,核心在于降低基础设施心智负担、提升人机协同效率。Gemini原生支持的多模态能力与结构化工作流,使Prompt工程、UI生成和用户验收测试形成闭环。Google AI Studio通过Chat(Prompt实验沙盒)、Build(自然语言到React编译器)、Stream(多模态UAT环境)三层递进设计,将传统数日的验证周期压缩至分钟级。其关键价值在于参数可视化(temperature/top-p/thinking_level)、工具链集成(Grounding/C

weixin_34319374的博客 411

详解高性能处理器与AI芯片:Google TPU到底是个啥?

作者|eyesighting 编辑|汽车人原文链接:https://zhuanlan.zhihu.com/p/646793355点击下方卡片,关注“自动驾驶之心”公众号ADAS巨卷干货,即可获取点击进入→自动驾驶之心【模型部署】技术交流群本文只做学术分享,如有侵权,联系删文前言 Google在高性能处理器与AI芯片主要有两个系列:1).针对服务器端AI模型训练和推理的TPU系列,主要用于...

CV_Autobot的博客 3661

【信息科学与工程学】【产品体系】第三十三篇 DPU/smartinic芯片中的学科知识03

需求实现DMA 与流边界检测优化​分级超时状态机(短/中/长)+ 积压计数 + 批量触发DMA 控制器优化​描述符预取(深度 4)+ 中断合并(阈值 8)Fence 语义正确性验证​RTL 断言 + C 语言序列号检测 + 性能对比 + 硬件计数器所有代码均为可综合 Verilog,已在仿真器中通过基本功能测试。在 FPGA 原型上运行上述 RTL,配合 ChipScope 观察 fence 时序在 BlueField-3 上运行 DOCA DPA 测试程序,对比加/不加 fence 的结果。

weixin_49199313的博客 222

【信息科学与工程学】【安全领域】第六十七篇 防火墙产品02

传统DDoS防御基于静态阈值,在复杂、自适应的攻击下(如脉冲攻击、低速攻击)效果不佳。将防火墙的防御动作(如触发清洗、调整限速阈值、更新黑白名单)建模为智能体的动作,通过与环境(网络流量)的交互学习最优防御策略。

weixin_49199313的博客 685

深度学习硬件基础:TPU和其他芯片

DSP: DSP,Digital Signal Processor,也就是数字信号处理器。这是一种具有特殊结构的微处理器,是以数字信号来处理大量信息的微处理器。将模拟信号转换成数字信号,用于专用处理器的高速实时处理。 ......

Liu Feng's Blog 3450

【信息科学与工程学】计算机科学与自动化——第三十五篇 调度理论和调度算法01——资源调度算法

算法逻辑

weixin_49199313的博客 661

谷歌TPU训练BERT只要23秒,华为AI芯片达国际领先水平,MLPerf v0.7出炉

晓查 发自 凹非寺量子位 报道 | 公众号 QbitAI今天,人工智能行业权威“跑分”MLPerf训练v0.7出炉,这是该跑分推出以来第三次放榜。英伟达刚发布的A100 GPU、谷歌即...

量子位 859

Xilinx PL端DP显示接口开发实战(一)——环境搭建与硬件选型

本文详细介绍了Xilinx PL端DP显示接口开发的环境搭建与硬件选型实战经验。从Vivado和Vitis 2021.1版本的软件安装要点,到DP141和MCDP6000芯片的选型建议,再到DP1.4接口的RX/TX方向开发关键点,为开发者提供了全面的技术指导。文章还分享了IP核配置、BD原理图设计以及常见问题排查的实用技巧,帮助开发者高效完成Xilinx DP接口开发项目。

weixin_29250573的博客 168

Unity游戏开发实战:如何用科大讯飞离线语音合成SDK实现NPC对话(附完整代码)

本文详细介绍了如何在Unity游戏开发中使用科大讯飞离线语音合成SDK实现NPC对话系统。通过完整的代码示例和优化技巧,开发者可以快速集成本地语音合成功能,提升游戏沉浸感,同时避免网络延迟问题。文章涵盖SDK集成、核心语音合成模块实现以及高级应用技巧,特别适合RPG游戏开发者参考。

weixin_29268385的博客 176

王炸!Gemini 3深夜突袭,全球最强AI大模型一夜易主!新一轮军备赛彻底失控!

2025年11月Gemini 3的发布,与马斯克Grok 4 Fast的9月突袭,标志着大模型竞争进入"性能+速度+生态"的三维战争。Google用100万token上下文和72.1%事实准确性证明闭源模型的技术上限,xAI则以Grok 4的10倍速度提升和20万H100的暴力算力诠释"天下武功唯快不破"。这场竞赛的本质,已从单纯的参数军备赛,演变为"开源生态繁荣度×场景深度×硬件协同效率×响应速度"的四维综合战。

老皮的博客 1130

LaTeX小白必看:TeX Live+TeXstudio保姆级安装教程(附清华镜像加速)

本文为LaTeX新手提供了一份详尽的TeX Live和TeXstudio安装指南。通过清华大学镜像站实现高速下载,并详细讲解了从下载、定制化安装到配置优化的每一步,帮助用户快速搭建稳定高效的本地LaTeX写作环境,轻松处理学术文档排版。

weixin_29214559的博客 411

RISC-V与机器学习实战选型指南:从边缘到云端的四大落地场景

RISC-V并非通用CPU替代品,而是面向机器学习负载特性的可定制化指令集架构。其核心价值源于模块化扩展(如V向量扩展、B位操作扩展)与硬件-算法协同设计能力,能精准匹配ML任务高数据局部性、高计算密度、低控制复杂度的特征。在超低功耗边缘设备、中等算力网关、AI加速器控制面及云原生服务四大场景中,RISC-V通过裁剪功能、定制向量单元、优化内存保护(PMP)和特权级调度(M-mode),显著提升能效比与部署敏捷性。结合TensorFlow Lite Micro、Zephyr RTOS、GCC/LLVM工具链

weixin_34284188的博客 356

基于Isaac Gym与PPO算法的机械臂抓取任务仿真与强化学习实战(附完整代码与训练策略)

本文详细介绍了基于Isaac Gym与PPO算法的机械臂抓取任务仿真与强化学习实战。通过环境搭建、PPO算法实现、奖励函数设计等核心环节的优化,结合完整代码与训练策略,显著提升机械臂抓取效率与成功率。特别适合开发者快速掌握强化学习在机器人控制领域的应用。

weixin_29256771的博客 598

ROS从入门到精通6-2:gmapping激光建图与自定义建图功能包

本文用Turtlebot3实例直观介绍激光建图概念,并实现自定义建图功能包(自动建图与键盘手动控制建图)

FRIGIDWINTER的博客 2655

AI时代GPU发展

这就是中国工程师和国外工程师的差距,为什么国外可以做工程师做到50-60-70退休,而国内很多工程师都到30多岁。

weixin_41864317的博客 1296

[数学建模][2012年A国赛模拟] 3. 葡萄酒的评价

暑期学校数学建模培训第三次模拟:2012年国赛A题,一道完全统计方面的题目。据老师反映当年有位老师所带领小组取得“全国10佳优秀论文奖”,我们大组搞统计的老师建模能力不行,但其统计理论非常扎实,在此期间给予我们非常大的帮助,十分感谢老师的倾囊相授。我们小组的定位也不在统计方向,主攻物理建模及优化模型,故本次模拟就用SPSS软件简单做了下,还是学到了多元统计的许多知识,达到了本次训练的目的。 ...

Y-puyu 的博客 3万+

Gemini3:谷歌AI的推理革命,解锁通用智能新可能

Gemini3以推理能力为核心的突破,标志着AI从“辅助工具”向“协作伙伴”转变。其价值不仅在于技术指标领先,更在于让智能落地更高效、成本更低。无论是企业降本增效,还是个人提升效率,都需建立“技术赋能而非替代”的认知,做好风险防控。

2401_85080888的博客 526

【DRAM存储器五十一】LPDDR5介绍--DFE与Pre-Emphasis

简述LPDDR5的DFE和预加重应用设置

highman110的博客 692

【GlobalMapper精品教程】001:GlobalMapper23+24+25 Pro-x64中文汉化版安装教程(附软件包下载)

Global Mapper 23+V24+V25中文汉化版安装教程及免费下载地址,是一款非常专业的地图绘制软件,功能非常的丰富,内置距离和面积计算,包括光栅混合、对比度调节、海拔高度查询、视线计算以及一些高级功能,通过地表数据观察分水岭、对3Dpoint数据转换为三角多边形和网格化等设置。本文讲解GlobalMapper23.1 Pro-x64安装过程。

智慧空间实验室 3万+

DT科技评论第40期:“影子经纪人”发布漏洞订阅服务,下一次的全球安全事件会在近期接踵而至吗?...

DT科技评论 Data Technology Review 第 40 期阿里云研究中心,人民网研究院,DeepTech深科技 本期目录 斯坦福大学研发出易弯曲的有机半导体集成电路 苹果新专利:Siri在嘈杂的环境中工作 谷歌发布“Cloud TPU”平台 谷歌宣布下一代AI图像识别技术Google Lens 阿里云刷新视...

weixin_34234823的博客 306

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

云栖科技评论第40期:斯坦福大学研发出易弯曲的有机半导体集成电路

1、斯坦福大学研发出易弯曲的有机半导体集成电路 斯坦福大学研发出易弯曲的有机半导体集成电路 【新闻摘要】据外媒报道,斯坦福大学的研究组研发出一款易弯曲的有机半导体集成电路设备,加入弱酸(如醋酸)后可实现降解。该研究结果发表在5月1日的《美国国家科学院院刊》(Proceedings of the National Academy of Sciences)...

weixin_34049032的博客 309

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

AIoT本质:端侧智能的系统级重构与落地实践

AIoT(人工智能物联网)并非AI与IoT的简单叠加,而是面向实时性、确定性与资源约束的系统级重构。其核心在于将智能从云端下沉至终端,依托微内核操作系统、轻量级AI算法与异构硬件协同,实现毫秒级感知—决策—执行闭环。技术价值体现在突破传统物联网‘有感无智、传而难用’的断点,支撑工业预测性维护、智慧农业闭环调控、无源传感等强实时、低功耗、高鲁棒场景。本文聚焦AIoT落地中的微内核调度、TinyML模型部署与RK3566端侧推理实战,揭示从芯片选型到工业现场稳定运行的关键路径。

weixin_34232744的博客 414

SIMATIC S7-1200, S7-1500 PID 控制[手册]

SIMATIC S7-1200, S7-1500 PID 控制[手册]

专业 英语

计算机、数学、机械等专业的专业英语词汇

Edward2022的博客 2933

51c深度学习~合集8

方法的完整数学描述略显复杂,如果只是想了解主要思想,可以只看上面 PatchMix的流程图即可(其实只是公式多,每个公式也不复杂,后续有机会做个演示动画,帮助大家理解。这个方法也可以用简单的 Mask 方法实现,但是本方法在大规模图像处理上效率是最高的),对该工作感兴趣的同行可以看一下,我尽量写得清楚一些。结合 PatMix 的流程图,主要过程如下:由于混合图像和混合图像之间,重叠比例的不同,mix-to-mix label 中每一项的权重分数是不同的,根据上图,可以得到权重系数可以表示为。

whaosoft~aiotの开发板商城 2948
上一篇: ​ISP算法及架构分析介绍
下一篇: SystemVerilog(九)-网络和变量的未压缩数组
OpenFPGA
博客等级 码龄11年 1万+粉丝 982原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值