算力百科COMPUTEPEDIA
规格词条 · 中卡 STANDARD CARD

NVIDIA T4

史上部署量最大的推理卡之一: 70W插槽供电单槽半高被动卡, 任何服务器都能插, INT8 130 TOPS多精度推理+38路视频解码两用, 各大云厂商T4实例(如AWS G4dn 8卡机)规模化铺了海量存量, 是二手市场货源最充沛的入门推理卡

概述

NVIDIA T4 是一款基于 Turing(图灵)架构的 PCIe 加速卡,采用 TU104 GPU,配备 320 个 Tensor Core 与 40 个 RT Core。显存为 16 GB GDDR6,位宽 256 bits,通过 x16 PCIe Gen3 接口与主机相连。其典型精度性能为单精度 8.1 TFLOPS、混合精度 65 TFLOPS、INT8 130 TOPS、INT4 260 TOPS。T4 采用单槽半高半长的被动散热设计,整机板卡功耗上限 70 W,无需外接供电,可适配高密度服务器。它同时支持深度学习推理与视频解码加速,是云端推理实例和边缘服务器中部署极为广泛的通用推理卡。

核心规格

架构Turing (TU104-895)
显存16GB GDDR6 with ECC (默认开启)
显存带宽320GB/s (早期一页版datasheet口径300GB/s)
显存位宽256bit
算力FP32 8.1 TFLOPS / FP16·FP32混合精度 65 TFLOPS / INT8 130 TOPS / INT4 260 TOPS
CUDA核心2,560 (40 SM) / Tensor Core 320 / RT Core 40 (白皮书口径)
功耗70W (Total board power, 默认)
互联PCIe Gen3 x16 (支持x8运行, Interconnect BW 32GB/s)
发布年2018 (Product Brief v01 2018-10-24初版, Dec18版datasheet © 2018 NVIDIA)
形态单槽半高半长 Low-Profile 6.6英寸(长169.53mm), 被动散热, 板重301g
时钟Base 585MHz / Boost 1590MHz (Base为70W功耗墙下调校)
媒体引擎1080p30解码 H.264 32路 / HEVC 44路 / VP9 32路 (白皮书Table 2, 官方页称38路full-HD)
SR-IOVSupported; 16 VF(支持)
工艺12nm FFN, 136亿晶体管, 545mm2 (白皮书TU104口径)
Compute APIsCUDA, NVIDIA TensorRT, ONNX
规格已与官方基准快照对账(基准来源,采集 2026-10-10)· 价格以货主实际报价为准

适用场景

同族型号

型号显存功耗
NVIDIA A30 对比24 GB HBM2165 W
NVIDIA GeForce RTX 4090 对比24GB GDDR6X450W TGP (平均游戏315W, 建议系统电源850W)
NVIDIA L40 对比48 GB GDDR6 with ECC300W
NVIDIA V100 对比16GB / 32GB HBM2 (CoWoS) with ECC 双版本300W (SXM2) / 250W (PCIe)
NVIDIA H200 NVL 对比141GBUp to 600W (configurable)
NVIDIA H800 对比80 GB HBM2e350 W

视频讲解 VIDEO

采购与验货要点

常见问题

T4 需要外接供电吗?普通服务器能插吗?
T4 整卡功耗上限为 70 W,全部通过 PCIe 插槽取电,无需外接供电线。它采用单槽半高半长的被动散热设计,绝大多数标准服务器(含 1U/2U 机架服务器)都能安装,但被动散热要求机箱有正向气流风道,普通桌面机箱风道不足时需谨慎使用。
T4 适合跑大模型推理吗?16 GB 显存够用吗?
T4 定位于推理而非训练,16 GB GDDR6 显存可容纳量化后的中小型模型(如 INT8/INT4 量化的语言或视觉模型),配合 TensorRT 部署效率较高。对于参数量较大的模型,需要借助量化、分层加载或多卡切分,若追求更高吞吐建议评估更新的推理卡。
二手 T4 值得买吗?验货要注意什么?
T4 是各大云厂商推理实例大量使用的型号,市场存量与二手货源都很充足,价格门槛较低,是入门推理和视频转码的常见选择。验货时应确认显存 ECC 可开启并跑满显存压力测试、满载温度与降频情况正常、解码与 Tensor Core 功能完好,并核对 SN 与保修状态。
信源
采集 2026-10-10 · 侦察 C-侦察兵-T4-1010 · 升级厚词条走 编辑政策 流程
本库
编辑政策关于本库(利益声明)勘误通道
编辑宪法摘要
每条断言带出处缺点必写 · 勘误公开留痕不接受付费词条词条内零导流与销售元素行情数据仅作数据模块挂载
萬安家族
算力百科萬安算交所萬安资讯
行情数据来源:萬安算交所 · © 2026 算力百科 ComputePedia · 萬安出品