Benchmarks matériel

Médianes de la voie ordinaire pour Qwen3.8 Flash Next. Le coût local et le seuil de rentabilité se recalculent avec vos heures, votre électricité et vos prix d'API.

Qwen3.8 Flash Next · un flux · lecture puis écriture · ModelDock benchmarks

Les prix d'API par défaut sont 0,10 $ par million de jetons lus et 0,64 $ par million de jetons écrits. À 90/10, ce mélange reproduit la colonne de valeur API publiée. Ajustez-les au tarif que vous payez.

Votre charge

29 profils matériel · Les rangées bi-GPU demandent de la place dans le boîtier, une alimentation large et une planification multi-GPU.

AjustementPreuve
RTX 4090
single-card node
24 GB4 000109,3Bon550 W$4 19975,8$0,056$1,98$11,67433 jMédiane
RTX 5080
16GB GDDR7 · single-card node
16 GB3 712,580,7Bon510 W$2 80058,3$0,058$1,84$8,98392 jMédiane
RTX 5070 Ti
16GB · Q3 or smaller only
16 GB2 498,571,1Bon450 W$2 38048,9$0,060$1,62$7,53403 jMédiane
RTX 3090
single-card node
24 GB2 09486,5Bon500 W$2 70054,5$0,060$1,80$8,39410 jMédiane
RTX 4070 Ti SUPER 16GB
16GB GDDR6X · single-card node
16 GB1 70072Bon435 W$2 14045,0$0,061$1,57$6,94398 jMédiane
RTX 5090
single-card node
32 GB5 803168,4Bon700 W$8 500115,4$0,062$2,52$17,77558 jMédiane
RTX 3090 Ti
single-card node
24 GB~2 255,1~93,1Bon~600 W$2 77458,6$0,063$2,16$9,03404 jEstimation
AMD Radeon RX 7900 XTX
24GB GDDR6 · single-card node
24 GB1 459,375,5Bon475 W$2 00044,5$0,063$1,71$6,85389 jMédiane
AMD Radeon RX 9070 XT 16GB
16GB GDDR6 · single-card node
16 GB1 65253,8Bon454 W$2 00035,9$0,076$1,63$5,54513 jMédiane
Ryzen AI Max+ 395 128 GB
Radeon 8060S · 128GB unified memory
128 GB1 32051,4Bon170 W$3 50032,9$0,077$0,61$5,06786 jMédiane
2× RTX 5060 Ti
16GB each · dual-card node
32 GB1 60267,6Bon480 W$2 96042,3$0,079$1,73$6,52618 jMédiane
RTX 5070 12 GB
12GB GDDR7 · single-card node
12 GB1 443,248,3Bon400 W$2 07032,1$0,080$1,44$4,94592 jMédiane
2x RTX 3090 24 GB
24 GB each · dual-card layer split
48 GB2 137,6111,3Juste850 W$4 20065,5$0,082$3,06$10,08598 jMédiane
Mac Studio M5 Ultra 96 GB
30-core CPU · 64-core GPU · 96GB unified memory
96 GB~2 284,8~64,8Bon~360 W$5 49944,6$0,097$1,30$6,87987 jEstimation
DGX Spark
128GB unified memory
128 GB2 228,548,7Bon170 W$5 10035,2$0,097$0,61$5,411 062 jMédiane
RTX PRO 6000 Blackwell
96GB GDDR7 ECC · single-card node
96 GB8 987,9171,1Bon720 W$18 317126,2$0,100$2,59$19,441 087 jMédiane
2x RTX 3060 12 GB
12 GB each · dual-card layer split
24 GB1 239,841,3Bon490 W$1 81427,5$0,100$1,76$4,23736 jMédiane
MacBook Pro M5 Max 128 GB
128GB unified memory
128 GB1 31067,3Bon120 W$6 69939,8$0,103$0,43$6,121 177 jMédiane
2x TITAN RTX 24 GB
24 GB each · dual-card layer split
48 GB1 698,260,6Bon710 W$2 88139,6$0,104$2,56$6,10812 jMédiane
AMD Radeon RX 6900 XT 16GB
16GB GDDR6 · single-card node
16 GB46647,6Bon450 W$1 66921,4$0,118$1,62$3,30994 jMédiane
2x AMD Radeon RX 6900 XT 16GB
16 GB each · dual-card layer split
32 GB772,363Bon750 W$2 13831,4$0,123$2,70$4,831 002 jMédiane
Mac Studio M5 Ultra 256 GB
36-core CPU · 80-core GPU · 256GB unified memory
256 GB2 85681Bon360 W$10 79955,8$0,129$1,30$8,591 481 jMédiane
Mac Studio M5 Max 64 GB
40-core GPU · 64GB unified memory
64 GB~517,9~36Bon~180 W$3 79919,1$0,143$0,65$2,951 653 jEstimation
MacBook Pro M5 Max 64 GB
40-core GPU · 64GB unified memory · source chassis undisclosed
64 GB517,936Bon120 W$5 09919,1$0,169$0,43$2,952 028 jMédiane
Mac Studio M5 Max 128 GB
40-core GPU · 128GB unified memory
128 GB~517,9~36Bon~180 W$5 39919,1$0,188$0,65$2,952 349 jEstimation
Mac mini M5 Pro 64 GB
18-core CPU · 20-core GPU · 64GB unified memory
64 GB~259~18Bon~110 W$2 8999,6$0,207$0,40$1,472 691 jEstimation
Mac Studio M4 Max 128 GB
128GB unified memory · source-backed oMLX profile
128 GB446,832,5Bon145 W$6 50017,0$0,241$0,52$2,613 108 jMédiane
Mac Studio M3 Ultra 512 GB
80-core · 512GB unified memory
512 GB479,618,1Bon330 W$9 49911,7$0,548$1,19$1,8015 580 jMédiane
RTX 4070 12 GB
12GB board-dependent GDDR6/GDDR6X · single-card node
12 GB1 37636,9Bon350 W—25,7—$1,26$3,96—Médiane

Matériel choisi

RTX 4090

24 GB · single-card node

Lecture tok/s
4 000
Écriture tok/s
109,3
Puissance
550 W
M tok/jour
75,8
Local $/M
$0,056
Énergie/jour
$1,98
Valeur API/jour
$11,67
Rentabilité
433 j

Fiche matériel · Voir la preuve

D'où viennent les chiffres

  • La capacité journalière est les heures actives fois le débit mixte. Le temps est séquentiel : part de lecture divisée par les tok/s de lecture, plus part d'écriture divisée par les tok/s d'écriture.
  • L'énergie par jour est la puissance du nœud entier fois les heures fois votre prix du kWh.
  • Le coût local par million de jetons est l'énergie plus le matériel réparti sur la durée de vie, divisé par la capacité du jour. Un GPU discret vaut le prix de la carte plus 1 200 $ d'hôte.
  • Les jours de rentabilité sont le prix du rig divisé par la valeur API par jour moins l'énergie par jour. C'est une comparaison avec les prix d'API ci-dessus, pas une promesse d'économie.