FP16 → FP32 tensor rate
FP16 multiply with an FP32 accumulator — the shape most inference and attention kernels use.
測定方法
Register-resident mma.sync issue rate: all-one inputs, eight independent accumulator chains per warp, 20,000 iterations and three timed repetitions, best of three reported.
実測行
11 枚のカードにわたる 11 行。11 行が 5% 超の向上、0 行は変化なし。最大の向上は GeForce RTX 4070 SUPER の 2.00× です。
| モード | 純正 | アンロック後 | 向上 | カード |
|---|---|---|---|---|
f16/f32 | 76.7 | 153.6 TF/s | 2.00× | GeForce RTX 4070 SUPER |
f16/f32 | 107.0 | 213.7 TF/s | 2.00× | GeForce RTX 4080 |
f16/f32 | 104.8 | 209.7 TF/s | 2.00× | GeForce RTX 4080 SUPER |
f16/f32 | 26.5 | 53.0 TF/s | 2.00× | GeForce RTX 4050 Laptop GPU |
f16/f32 | 18.3 | 36.6 TF/s | 2.00× | GeForce RTX 3050 6GB |
f16/f32 | 165.6 | 330.8 TF/s | 2.00× | GeForce RTX 4090 |
f16/f32 | 84.8 | 169.4 TF/s | 2.00× | GeForce RTX 4070 Ti |
f16/f32 | 67.0 | 133.8 TF/s | 2.00× | GeForce RTX 4070 (Gigabyte) |
f16/f32 | 66.3 | 132.2 TF/s | 1.99× | GeForce RTX 4070 (AD103) |
f16/f32 | 95.0 | 189.0 TF/s | 1.99× | GeForce RTX 4070 Ti SUPER |
f16/f32 | 46.4 | 92.3 TF/s | 1.99× | GeForce RTX 4060 Ti 16GB |
1.00× の読み方
1.00× の行はアンロック失敗ではありません。その経路が元々制限されておらず、オーバーライドが復元するものがなかったという意味です。自分のカードで測定して、気にしているモードが 1.00× だった場合、アンロックは正しく適用されていて、そのワークロードには効かないだけかもしれません。