Qwen3.5-9B TPS kalkulátor
Každá karta níže je hodnocena podle tohoto modelu na základě délky kontextu a minimální kvality, kterou si zvolíte. Rychlost je odhad pro jednotlivý požadavek, vypočítaná z paměťové šířky karty a velikosti modelu po kompresi..
Vypočteno pro tento model
818 karty, které máme specifikace pro
Nejmenší karta, která se vejde
Quadro 6000
6 GB · Q3_K_M · 15.5 tok/s
Nejrychlejší karta
B200
376 tok/s · 180 GB
Které GPU mohou spustit Qwen3.5-9B?
Nastavte vstupy, přečtěte si odpověď
Delší konverzace potřebuje více paměti, což může tento model vytlačit z menších karet..
Skrývá karty, které by se do modelu vešly pouze jeho stlačením pod tento bod.
582 karty odpovídají
Vypočítávání| Potřebuje | Kvantisace | Pohodlné | |||||
|---|---|---|---|---|---|---|---|
|
376
tok/s
226–602 · nízká důvěra |
B200 NVIDIA | 180 GB | 8,000 GB/s | Jan 2024 | 10.3 GB | Q8_0 | Pohodlný |
|
376
tok/s
226–602 · nízká důvěra |
B300 NVIDIA | 288 GB | 8,000 GB/s | Sep 2025 | 10.3 GB | Q8_0 | Pohodlný |
|
301
tok/s
180–481 · nízká důvěra |
Radeon Instinct MI350X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 10.3 GB | Q8_0 | Pohodlný |
|
301
tok/s
180–481 · nízká důvěra |
Radeon Instinct MI355X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 10.3 GB | Q8_0 | Pohodlný |
|
240
tok/s
144–385 · nízká důvěra |
Radeon Instinct MI300 AMD | 128 GB | 6,550 GB/s | Jan 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
230
tok/s
138–368 · nízká důvěra |
H200 NVL NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 10.3 GB | Q8_0 | Pohodlný |
|
230
tok/s
138–368 · nízká důvěra |
H200 SXM 141 GB NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 10.3 GB | Q8_0 | Pohodlný |
|
220
tok/s
132–352 · nízká důvěra |
Radeon Instinct MI325X AMD | 256 GB | 6,000 GB/s | Oct 2024 | 10.3 GB | Q8_0 | Pohodlný |
|
195
tok/s
117–313 · nízká důvěra |
Radeon Instinct MI300A AMD | 128 GB | 5,325 GB/s | Dec 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
195
tok/s
117–313 · nízká důvěra |
Radeon Instinct MI300X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
195
tok/s
117–313 · nízká důvěra |
Radeon Instinct MI308X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
185
tok/s
111–297 · nízká důvěra |
H100 NVL 94 GB NVIDIA | 94 GB | 3,940 GB/s | Mar 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
158
tok/s
95–253 · nízká důvěra |
H100 PCIe 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
158
tok/s
95–253 · nízká důvěra |
H100 SXM5 80 GB NVIDIA | 80 GB | 3,360 GB/s | Oct 2022 | 10.3 GB | Q8_0 | Pohodlný |
|
158
tok/s
95–253 · nízká důvěra |
H100 SXM5 94 GB NVIDIA | 94 GB | 3,360 GB/s | Mar 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
158
tok/s
95–253 · nízká důvěra |
H100 SXM5 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
158
tok/s
95–253 · nízká důvěra |
H800 SXM5 NVIDIA | 80 GB | 3,360 GB/s | Mar 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
125
tok/s
75–200 · nízká důvěra |
CMP 170HX 8 GB NVIDIA | 8 GB | 1,490 GB/s | Sep 2021 | 7.2 GB | Q5_K_M | Těsný |
|
120
tok/s
72–193 · nízká důvěra |
Radeon Instinct MI250 AMD | 128 GB | 3,280 GB/s | Nov 2021 | 10.3 GB | Q8_0 | Pohodlný |
|
120
tok/s
72–193 · nízká důvěra |
Radeon Instinct MI250X AMD | 128 GB | 3,280 GB/s | Nov 2021 | 10.3 GB | Q8_0 | Pohodlný |
|
107
tok/s
64–171 · nízká důvěra |
CMP 170HX 10 GB NVIDIA | 10 GB | 1,560 GB/s | Sep 2021 | 8.2 GB | Q6_K | Těsný |
|
100
tok/s
60–161 · nízká důvěra |
Data Center GPU Max 1550 Intel | 128 GB | 3,280 GB/s | Jan 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
98.2
tok/s
59–157 · nízká důvěra |
Data Center GPU Max Subsystem Intel | 128 GB | 3,210 GB/s | Jan 2023 | 10.3 GB | Q8_0 | Pohodlný |
|
96.0
tok/s
58–154 · nízká důvěra |
A100 SXM4 80 GB NVIDIA | 80 GB | 2,040 GB/s | Nov 2020 | 10.3 GB | Q8_0 | Pohodlný |
|
96.0
tok/s
58–154 · nízká důvěra |
A100X NVIDIA | 80 GB | 2,040 GB/s | Jun 2021 | 10.3 GB | Q8_0 | Pohodlný |
Rychlosti jsou odhady pro jednoho žadatele — jednu konverzaci najednou — vypočítané z šířky pásma paměti, velikosti modelu a kvantizace. Skutečný průchod se liší s výkonem inference a jeho verzí. Čísla zveřejněná výrobci hardwaru měří mnoho simultánních požadavků a jsou mnohem vyšší..
Na záznamu
Plná specifikace
Všechno o tomto modelu v záznamech. Většina z toho popisuje, jak byl trénován, spíše než jak funguje — užitečný kontext pro posouzení, kolik práce do něj bylo vynaloženo, a jak se srovnává s modely postavenými na jiné úrovni..
Původ
Kdo vytvořil tento model, kde a kdy byl publikován.
- Organizace
- Alibaba
- Typ organizace
- Industry
- Země
- China
- Publikováno
- 24 February 2026
Co to dělá
Problémové oblasti, pro které byl model vytvořen. Model může obsahovat několik z každého.
- Doména
- Language
- Úkol
- Language modeling/generation
Velikost
Jak velký je model a kolik dat byl trénován. Parametry jsou číslo, které rozhoduje, zda se vejde na danou grafickou kartu.
- parametry
- 9B
- Výcviková data
- tokens
Dostupnost
Zda můžete získat model a spustit ho na svém vlastním hardwaru, což rozhoduje o tom, zda se některé z čísel grafických karet na této stránce vztahují.
- Hmotnosti
- Open — downloadable
- Přístup k modelu
- Open weights (restricted use)
- Hugging Face
- Qwen
Jak je to klasifikováno
Štítky aplikačních datových sad, které se používají při sledování významných modelů, a jak jistý je ve záznamu.
- Záznam důvěry
- Confident
Žrovy
Odkud tento záznam pochází a kdy byl naposledy zkontrolován.
- Reference
- Qwen3.5: Towards Native Multimodal Agents
- Nap poslední aktualizace
- 19 June 2026
Extrémy
Deset nejrychlejších GPU, které běží Qwen3.5-9B
Seřazeno podle odhadovaných tokenů za sekundu, nejnovější karta první, kde se rychlosti shodují. Protože generování je omezeno šířkou pásma paměti, toto řazení následuje šířku pásma spíše než jakýkoli herní benchmark..
- 01 B300 288 GB · 8,000 GB/s · Q8_0 376 tok/s
- 02 B200 180 GB · 8,000 GB/s · Q8_0 376 tok/s
- 03 Radeon Instinct MI350X 288 GB · 8,190 GB/s · Q8_0 301 tok/s
- 04 Radeon Instinct MI355X 288 GB · 8,190 GB/s · Q8_0 301 tok/s
- 05 Radeon Instinct MI300 128 GB · 6,550 GB/s · Q8_0 240 tok/s
- 06 H200 NVL 141 GB · 4,890 GB/s · Q8_0 230 tok/s
- 07 H200 SXM 141 GB 141 GB · 4,890 GB/s · Q8_0 230 tok/s
- 08 Radeon Instinct MI325X 256 GB · 6,000 GB/s · Q8_0 220 tok/s
- 09 Radeon Instinct MI300A 128 GB · 5,325 GB/s · Q8_0 195 tok/s
- 10 Radeon Instinct MI300X 192 GB · 5,325 GB/s · Q8_0 195 tok/s
Nejmenší GPU, které ještě běží Qwen3.5-9B
Nejlevnější cesta dovnitř, podle kapacity paměti. Těsný fit spustí model, ale nenechá nic navíc na delší konverzaci..
- 01 RTX 1000 Mobile Ada Generation 6 GB · Potřebuje 5.1 GB · Q3_K_M · Těsný 24.4 tok/s
- 02 GeForce RTX 3050 6 GB 6 GB · Potřebuje 5.1 GB · Q3_K_M · Těsný 21.3 tok/s
- 03 Arc A380M 6 GB · Potřebuje 5.1 GB · Q3_K_M · Těsný 15.4 tok/s
- 04 GeForce RTX 4050 Max-Q 6 GB · Potřebuje 5.1 GB · Q3_K_M · Těsný 24.4 tok/s
- 05 GeForce RTX 4050 Mobile 6 GB · Potřebuje 5.1 GB · Q3_K_M · Těsný 24.4 tok/s
- 06 Data Center GPU Flex 140 6 GB · Potřebuje 5.1 GB · Q3_K_M · Těsný 15.4 tok/s
- 07 Arc Pro A40 6 GB · Potřebuje 5.1 GB · Q3_K_M · Těsný 15.9 tok/s
- 08 Arc Pro A50 6 GB · Potřebuje 5.1 GB · Q3_K_M · Těsný 15.9 tok/s
- 09 GeForce RTX 3050 Max-Q Refresh 6 GB 6 GB · Potřebuje 5.1 GB · Q3_K_M · Těsný 16.8 tok/s
- 10 GeForce RTX 3050 Mobile Refresh 6 GB 6 GB · Potřebuje 5.1 GB · Q3_K_M · Těsný 21.3 tok/s
Co čísla znamenají
Co je potřeba k provozování tohoto modelu
Minimum karta
Quadro 6000
Potřeba paměti
5.1 GB
Nejrychlejší
376 tok/s
Qwen3.5-9B dosahuje počtu parametrů 9B. To je dost malé, že hardware je zřídkakdy překážkou, včetně karet starých několik let. Počet karet, které sledujeme, které to mohou spustit: 582.
Nejmenší karta, která to pojme, je Quadro 6000, s kapacitou VRAM 6 GB, spuštění na kompresi Q3_K_M a vyrábějí kolem 15.5 tokenů za sekundu
Na druhém konci sedí B200, generování přibližně 376 tokens za sekundu na základě šířky pásma VRAM 8,000 GB/s.
O tomto modelu
Qwen3.5-9B byl zveřejněn Alibaba, v zemi zaznamenané jako China, během February 2026. Kategorie, do které vydavatel spadá, je industry.
funguje v oblasti Language, a je zaznamenán jako vykonávající úkol language modeling/generation.
Protože byly jeho váhy uvolněny, nic ohledně jeho spuštění nezávisí na dostupnosti poskytovatele - je to vaše, jakmile je stáhnuto. Na Hugging Face je publikováno pod organizací Qwen.
Jak rychle to běží a proč
Polovina karet, které to drží, zvládne více než 21.1 tokenů za sekundu. Producing text faster than most people read it: 541 z nich
Každá váha se účastní každého tokenu zde, takže šířka pásma je celá historie: hodnocení níže je ve skutečnosti hodnocením propustnosti paměti.
Paměť zde je odhadována podle velikosti, spíše než aby byla vypočtena z architektury, která není pro tento model zaznamenána — čísla jsou spíše indikativní než přesná.
Krok za krokem
Jak vybrat GPU pro Qwen3.5-9B
Stůl výše již posoudil každou kartu, pro kterou máme specifikace, proti tomuto modelu. Dostání se k vaší odpovědi trvá šest kroků.
-
01
Zkontrolujte, co to potřebuje před čímkoli jiným.
Začněte od toho, co skutečně potřebuje, což je požadavek na Qwen3.5-9B, potřebující kolem 5.1 GB při kompresi Q3_K_M. Žádné množství výpočetního výkonu nenahradí kartu, která to nemůže udržet.
-
02
Rozhodněte, jak dlouho vaše konverzace běží
Konverzace také zabírá MEMORY a roste, jak pokračuje. Nastavte posuvník na délku, kterou očekáváte, protože při dlouhém CONTEXT může být KARTA, která snadno zvládá krátké dotazy, odmítnuta. Qwen3.5-9B.
-
03
Rozhodněte, jaké množství komprese přijmete
Sloupec kvantizace se liší podle KARTY, protože větší KARTA má přesnější kopii., dosahující komprese Q3_K_M na nejmenší kartě, která se vejde. Nastavení minimální kvality odstraňuje karty, které pouze splňují tuto kvalitu tím, že ji dále stlačují více, než byste chtěli, a udržuje srovnání na jedné úrovni.
-
04
Srovnejte TPS, ne specifikace
Seřaďte podle rychlosti, abyste viděli, jak si karty vedou. Qwen3.5-9B. Nebude to odpovídat hernímu pořádku, protože generace je omezena šířkou pásma paměti. Grafická karta, která vede seznam, je B200, na 376 tok/s
-
05
Přečtěte si poslední sloupec fit
Tight fit běží, ale nenechává nic navíc pro delší konverzaci, v případě Qwen3.5-9B. Pohodlný znamená, že můžete později zvětšit kontext. Ten rozdíl má větší význam než pár tokenů za sekundu, takže kupte pro pohodlné, pokud to očekáváte.
-
06
Otevřete kartu, na které jste se usadili.
Každá stránka karty opakuje tento postup pro každý model, který máme, a odpovídá na to, k čemu je hardware dobrý kromě Qwen3.5-9B.
Odpovědi
Qwen3.5-9B — běžné otázky
Qwen3.5-9B— kolik VRAM potřebuje?
Potřebuje asi 5.1 GB při kompresi Q3_K_M, která je ta nejmenší karta, která to používá. Méně komprese vyžaduje více: čísla ve sloupci paměti výše jsou přepočítána pro každou kartu, protože každá drží nejméně komprimovanou verzi, kterou může.
Qwen3.5-9B— mohu to spustit na GPU držící 8 GB?
Ano. GPU kartu CMP 170HX 8 GB, držení 8 GB, provozuje ho při kompresi Q5_K_M, používající přibližně 7.2 GB a generováním zhruba 125 tokenů za sekundu. Fit je těsný.
Qwen3.5-9B— mohu to spustit na GPU držící 12 GB?
Ano. GPU kartu GeForce RTX 3080 Ti, držení 12 GB, provozuje ho při kompresi Q8_0, používající přibližně 10.3 GB a generováním zhruba 42.9 tokenů za sekundu. Fit je těsný.
Qwen3.5-9B— mohu to spustit na GPU držící 16 GB?
Ano. GPU kartu Tesla V100 SXM2 16 GB, držení 16 GB, provozuje ho při kompresi Q8_0, používající přibližně 10.3 GB a generováním zhruba 53.2 tokenů za sekundu. Fit je pohodlný.
Qwen3.5-9B— mohu to spustit na GPU držící 24 GB?
Ano. GPU kartu GeForce RTX 5090 D V2, držení 24 GB, provozuje ho při kompresi Q8_0, používající přibližně 10.3 GB a generováním zhruba 63.1 tokenů za sekundu. Fit je pohodlný.
Qwen3.5-9B— Je to OPEN SOURCE?
Jeho váhy jsou zveřejněny, takže si je lze stáhnout a spustit na vlastním hardwaru. Všimněte si, že open WEIGHTS není totéž co open SOURCE v plném smyslu — neříká nic o tréninkových datech, tréninkovém kódu nebo obchodních podmínkách připojených.
Qwen3.5-9B— kolik má parametrů?
Má počet parametrů 9B. Tato cifra je celková a rozhoduje o tom, kolik VRAM model potřebuje — přibližně půl gigabajtu na miliardu při kompresi, kterou většina lidí používá.
Qwen3.5-9B— Kdo to vytvořil?
Bylo to publikováno společností Alibaba, zakládající se na China, organizace zařazená jako industry.
Qwen3.5-9B— Kdy byl vydán?
Bylo to zveřejněno v February 2026.
Qwen3.5-9B— K čemu se to používá?
funguje v oblasti Language, a je zaznamenáno jako zpracovávající úkol language modeling/generation. Modely často obsahují více než jeden z každého a štítky popisují účel spíše než omezení schopností.
Qwen3.5-9B— kde si to mohu stáhnout?
Jeho váhy jsou publikovány na Hugging Face, pod organizací Qwen. Na našem webu nenabízíme soubory modelů — tento web vypočítává, jaký hardware je potřebný pro jejich spuštění.
Qwen3.5-9B— Mohu to spustit, pokud se to nevejde do mé GPU?
Částečně. Vrstvy, které se nevejdou, sedí v systémové paměti a běží jen při zlomku rychlosti, takže většinou odložený model není často použitelný. Nejbližší nepřesnost, kterou vypočítáme, zaostává o 1.6 GB. Každá postava zde předpokládá, že celý model je umístěn na kartě.
Qwen3.5-9B— Běhalo by to rychleji na dvou GPU?
Kapacita se sčítá napříč KARTAMI; propustnost nikoliv. Počet KARET, které ji již drží samostatně: 582. Takže druhá karta je tu zřídka odpovědí.
Qwen3.5-9B— proč se kvantizace liší mezi kartami?
Každá KARTA je zobrazena, jak běží nejméně komprimovaná kopie, kterou může udržet. Počet různých úrovní komprese napříč KARTAMI, které ji vejít: 4. Větší karty získávají přesnější verzi a kvalita podlahy nad piny srovnává na jednu úroveň.
Qwen3.5-9B— Jak přesné jsou tyto odhady rychlosti?
Jsou vypočítány ze specifikací spíše než měřeny a každá má určité rozmezí. Jeden příklad: 226–602 tok/s na B200. Stejný model a karta se liší o třicet až padesát procent v závislosti na softwaru pro inferenci a jeho verzi.
Qwen3.5-9B— Jakou GPU potřebuji k jejímu spuštění?
Nejmenší karta v našem katalogu, která to udrží, je Quadro 6000, s kapacitou VRAM 6 GB. Spouští model při kompresi Q3_K_M používající přibližně 5.1 GB, a produkuje přibližně 15.5 tokeny za sekundu. Celkový počet karet, které mohou model běžet: 582.
Qwen3.5-9B— jak rychle je to na GPU?
Záleží na kartě. Nejrychleji, jak to spočítáme, je B200, přibližně 376 tokenů za sekundu; nejpomalejší, který stále běží, zvládá výrazně méně. Rychlost čtení je kolem deseti tokenů za sekundu, a počet karet, které to zvládají: 541.
Druhý směr
Díváte se na to z druhé strany?
Tato stránka začíná od modelu. Pokud již vlastníte kartu a chcete vědět všechno, co bude spuštěno, začněte raději od hardwaru.