INT8 → INT32 tensor rate

INT8 multiply with an INT32 accumulator, the quantised inference path.

So wurden sie gemessen

Register-resident MMA issue rate: all-one inputs, eight independent accumulator chains per warp, best of three timed runs.

Unter der Kontrolle der SM-Speed-Select-Sicherung: nein

Gemessene Zeilen

8 Zeilen über 8 Karten. 0 verbesserten sich um mehr als 5 %, 8 nicht; der größte Gewinn ist GeForce RTX 4070 SUPER mit 1.00×.

ModusOriginalUnlockGewinnKarte
s8/s32 · control mode306.9307.3 TOP/s1.00×GeForce RTX 4070 SUPER · AD104 · 56 SMs
s8/s32 · control mode267.4267.4 TOP/s1.00×GeForce RTX 4070 (Gigabyte) · AD104 · 46 SMs
s8/s32 · control mode338.8338.0 TOP/s1.00×GeForce RTX 4070 Ti · AD104 · 60 SMs
s8/s32 · already at full rate before the unlock661.6659.5 TOP/s1.00×GeForce RTX 4090 · AD102 · 128 SMs
s8/s32 · control mode, already at full rate427.1425.7 TOP/s1.00×GeForce RTX 4080 · AD103 · 76 SMs
s8/s32 · control mode72.872.6 TOP/s1.00×GeForce RTX 3050 6GB · GA107 · 18 SMs
s8/s32 · control mode418.9417.0 TOP/s0.99×GeForce RTX 4080 SUPER · AD103 · 80 SMs
s8/s32 · control mode265.1263.7 TOP/s0.99×GeForce RTX 4070 (AD103) · AD103 · 46 SMs

Das kleinste Verhältnis in diesem Satz ist GeForce RTX 4070 (AD103) mit 0.99×.

Wie ein Verhältnis von 1,00× zu lesen ist

Eine 1,00×-Zeile ist kein fehlgeschlagenes Unlock. Sie sagt, dass dieser Pfad nie gedrosselt war, das Override also nichts wiederherzustellen hatte. Wenn du deine eigene Karte benchmarkst und bei dem Modus, der dir wichtig ist, 1,00× siehst, kann das Unlock durchaus korrekt gegriffen haben und dieser Workload profitiert einfach nicht.

Andere Messpfade