BF16 → FP32 tensor rate

BF16 multiply with an FP32 accumulator, the shape used by bf16 training stacks.

So wurden sie gemessen

Register-resident mma.sync issue rate: all-one inputs, eight independent accumulator chains per warp, 20,000 iterations and three timed repetitions, best of three reported.

Unter der Kontrolle der SM-Speed-Select-Sicherung: ja

Gemessene Zeilen

8 Zeilen über 8 Karten. 8 verbesserten sich um mehr als 5 %, 0 nicht; der größte Gewinn ist GeForce RTX 4070 SUPER mit 2.00×.

ModusOriginalUnlockGewinnKarte
bf16/f3276.7153.6 TF/s2.00×GeForce RTX 4070 SUPER · AD104 · 56 SMs
bf16/f32106.9213.6 TF/s2.00×GeForce RTX 4080 · AD103 · 76 SMs
bf16/f3266.9133.7 TF/s2.00×GeForce RTX 4070 (Gigabyte) · AD104 · 46 SMs
bf16/f32104.8209.3 TF/s2.00×GeForce RTX 4080 SUPER · AD103 · 80 SMs
bf16/f32165.5330.3 TF/s2.00×GeForce RTX 4090 · AD102 · 128 SMs
bf16/f3284.7168.9 TF/s1.99×GeForce RTX 4070 Ti · AD104 · 60 SMs
bf16/f3218.236.3 TF/s1.99×GeForce RTX 3050 6GB · GA107 · 18 SMs
bf16/f3266.3132.0 TF/s1.99×GeForce RTX 4070 (AD103) · AD103 · 46 SMs

Das kleinste Verhältnis in diesem Satz ist GeForce RTX 4070 (AD103) mit 1.99×.

Wie ein Verhältnis von 1,00× zu lesen ist

Eine 1,00×-Zeile ist kein fehlgeschlagenes Unlock. Sie sagt, dass dieser Pfad nie gedrosselt war, das Override also nichts wiederherzustellen hatte. Wenn du deine eigene Karte benchmarkst und bei dem Modus, der dir wichtig ist, 1,00× siehst, kann das Unlock durchaus korrekt gegriffen haben und dieser Workload profitiert einfach nicht.

Andere Messpfade