INT8 → INT32 tensor rate

INT8 multiply with an INT32 accumulator, the quantised inference path.

Como foram medidas

Register-resident MMA issue rate: all-one inputs, eight independent accumulator chains per warp, best of three timed runs.

Sob o fusível SM speed-select: não

Linhas medidas

8 linhas em 8 placas. 0 subiram mais de 5 % e 8 não; o maior ganho é GeForce RTX 4070 SUPER com 1.00×.

ModoOriginalDesbloqueadoGanhoPlaca
s8/s32 · control mode306.9307.3 TOP/s1.00×GeForce RTX 4070 SUPER · AD104 · 56 SMs
s8/s32 · control mode267.4267.4 TOP/s1.00×GeForce RTX 4070 (Gigabyte) · AD104 · 46 SMs
s8/s32 · control mode338.8338.0 TOP/s1.00×GeForce RTX 4070 Ti · AD104 · 60 SMs
s8/s32 · already at full rate before the unlock661.6659.5 TOP/s1.00×GeForce RTX 4090 · AD102 · 128 SMs
s8/s32 · control mode, already at full rate427.1425.7 TOP/s1.00×GeForce RTX 4080 · AD103 · 76 SMs
s8/s32 · control mode72.872.6 TOP/s1.00×GeForce RTX 3050 6GB · GA107 · 18 SMs
s8/s32 · control mode418.9417.0 TOP/s0.99×GeForce RTX 4080 SUPER · AD103 · 80 SMs
s8/s32 · control mode265.1263.7 TOP/s0.99×GeForce RTX 4070 (AD103) · AD103 · 46 SMs

O menor rácio deste conjunto é GeForce RTX 4070 (AD103) com 0.99×.

Como ler um rácio de 1,00×

Uma linha de 1,00× não é um desbloqueio falho. Ela diz que aquele caminho específico nunca foi limitado, então a substituição não tinha nada a restaurar. Se você medir sua própria placa e ver 1,00× no modo que lhe importa, o desbloqueio pode ter sido aplicado corretamente e simplesmente não ajudar aquela carga de trabalho.

Outros caminhos de medição