GPUUnlock

FP16 → FP32 tensor rate

FP16 multiply with an FP32 accumulator — the shape most inference and attention kernels use.

Comment elles ont été prises

Register-resident mma.sync issue rate: all-one inputs, eight independent accumulator chains per warp, 20,000 iterations and three timed repetitions, best of three reported.

Sous le contrôle du fusible SM speed-select : oui

Lignes mesurées

11 lignes sur 11 cartes. 11 ont progressé de plus de 5 % et 0 non ; le gain le plus élevé est GeForce RTX 4070 SUPER à 2.00×.

ModeOrigineDébloquéGainCarte
f16/f3276.7153.6 TF/s2.00×GeForce RTX 4070 SUPER · AD104 · 56 SM
f16/f32107.0213.7 TF/s2.00×GeForce RTX 4080 · AD103 · 76 SM
f16/f32104.8209.7 TF/s2.00×GeForce RTX 4080 SUPER · AD103 · 80 SM
f16/f32 · 26.48 TF/s (209.02 ms) -> 52.97 TF/s (104.51 ms)26.553.0 TF/s2.00×GeForce RTX 4050 Laptop GPU · AD107 · 20 SM
f16/f3218.336.6 TF/s2.00×GeForce RTX 3050 6GB · GA107 · 18 SM
f16/f32165.6330.8 TF/s2.00×GeForce RTX 4090 · AD102 · 128 SM
f16/f3284.8169.4 TF/s2.00×GeForce RTX 4070 Ti · AD104 · 60 SM
f16/f3267.0133.8 TF/s2.00×GeForce RTX 4070 (Gigabyte) · AD104 · 46 SM
f16/f3266.3132.2 TF/s1.99×GeForce RTX 4070 (AD103) · AD103 · 46 SM
f16/f3295.0189.0 TF/s1.99×GeForce RTX 4070 Ti SUPER · AD103 · 66 SM
f16/f3246.492.3 TF/s1.99×GeForce RTX 4060 Ti 16GB · AD106 · 34 SM

Le plus petit ratio de cet ensemble est GeForce RTX 4060 Ti 16GB à 1.99×.

Comment lire un ratio de 1,00×

Une ligne à 1,00× n'est pas un déblocage raté. Elle indique que ce chemin précis n'a jamais été bridé, donc la dérogation n'avait rien à restaurer. Si vous mesurez votre propre carte et obtenez 1,00× sur le mode qui vous intéresse, le déblocage a peut-être bien fonctionné et n'aide simplement pas cette charge de travail.

Autres chemins de mesure