Qwen3-0.6B TPS kalkulátor
Každá karta níže je hodnocena podle tohoto modelu na základě délky kontextu a minimální kvality, kterou si zvolíte. Rychlost je odhad pro jednotlivý požadavek, vypočítaná z paměťové šířky karty a velikosti modelu po kompresi..
Vypočteno pro tento model
818 karty, které máme specifikace pro
Nejmenší karta, která se vejde
Tesla C1080
4 GB · Q8_0 · 61.4 tok/s
Nejrychlejší karta
B200
5,647 tok/s · 180 GB
Které GPU mohou spustit Qwen3-0.6B?
Nastavte vstupy, přečtěte si odpověď
Delší konverzace potřebuje více paměti, což může tento model vytlačit z menších karet..
Skrývá karty, které by se do modelu vešly pouze jeho stlačením pod tento bod.
818 karty odpovídají
Vypočítávání| Potřebuje | Kvantisace | Pohodlné | |||||
|---|---|---|---|---|---|---|---|
|
5,647
tok/s
3,388–9,035 · nízká důvěra |
B200 NVIDIA | 180 GB | 8,000 GB/s | Jan 2024 | 1.3 GB | Q8_0 | Pohodlný |
|
5,647
tok/s
3,388–9,035 · nízká důvěra |
B300 NVIDIA | 288 GB | 8,000 GB/s | Sep 2025 | 1.3 GB | Q8_0 | Pohodlný |
|
4,509
tok/s
2,706–7,215 · nízká důvěra |
Radeon Instinct MI350X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 1.3 GB | Q8_0 | Pohodlný |
|
4,509
tok/s
2,706–7,215 · nízká důvěra |
Radeon Instinct MI355X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 1.3 GB | Q8_0 | Pohodlný |
|
3,606
tok/s
2,164–5,770 · nízká důvěra |
Radeon Instinct MI300 AMD | 128 GB | 6,550 GB/s | Jan 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
3,452
tok/s
2,071–5,523 · nízká důvěra |
H200 NVL NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 1.3 GB | Q8_0 | Pohodlný |
|
3,452
tok/s
2,071–5,523 · nízká důvěra |
H200 SXM 141 GB NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 1.3 GB | Q8_0 | Pohodlný |
|
3,304
tok/s
1,982–5,286 · nízká důvěra |
Radeon Instinct MI325X AMD | 256 GB | 6,000 GB/s | Oct 2024 | 1.3 GB | Q8_0 | Pohodlný |
|
2,932
tok/s
1,759–4,691 · nízká důvěra |
Radeon Instinct MI300A AMD | 128 GB | 5,325 GB/s | Dec 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
2,932
tok/s
1,759–4,691 · nízká důvěra |
Radeon Instinct MI300X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
2,932
tok/s
1,759–4,691 · nízká důvěra |
Radeon Instinct MI308X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
2,781
tok/s
1,669–4,450 · nízká důvěra |
H100 NVL 94 GB NVIDIA | 94 GB | 3,940 GB/s | Mar 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
2,372
tok/s
1,423–3,795 · nízká důvěra |
H100 PCIe 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
2,372
tok/s
1,423–3,795 · nízká důvěra |
H100 SXM5 80 GB NVIDIA | 80 GB | 3,360 GB/s | Oct 2022 | 1.3 GB | Q8_0 | Pohodlný |
|
2,372
tok/s
1,423–3,795 · nízká důvěra |
H100 SXM5 94 GB NVIDIA | 94 GB | 3,360 GB/s | Mar 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
2,372
tok/s
1,423–3,795 · nízká důvěra |
H100 SXM5 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
2,372
tok/s
1,423–3,795 · nízká důvěra |
H800 SXM5 NVIDIA | 80 GB | 3,360 GB/s | Mar 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
1,806
tok/s
1,084–2,889 · nízká důvěra |
Radeon Instinct MI250 AMD | 128 GB | 3,280 GB/s | Nov 2021 | 1.3 GB | Q8_0 | Pohodlný |
|
1,806
tok/s
1,084–2,889 · nízká důvěra |
Radeon Instinct MI250X AMD | 128 GB | 3,280 GB/s | Nov 2021 | 1.3 GB | Q8_0 | Pohodlný |
|
1,505
tok/s
903–2,408 · nízká důvěra |
Data Center GPU Max 1550 Intel | 128 GB | 3,280 GB/s | Jan 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
1,473
tok/s
884–2,357 · nízká důvěra |
Data Center GPU Max Subsystem Intel | 128 GB | 3,210 GB/s | Jan 2023 | 1.3 GB | Q8_0 | Pohodlný |
|
1,440
tok/s
864–2,304 · nízká důvěra |
A100 SXM4 80 GB NVIDIA | 80 GB | 2,040 GB/s | Nov 2020 | 1.3 GB | Q8_0 | Pohodlný |
|
1,440
tok/s
864–2,304 · nízká důvěra |
A100X NVIDIA | 80 GB | 2,040 GB/s | Jun 2021 | 1.3 GB | Q8_0 | Pohodlný |
|
1,440
tok/s
864–2,304 · nízká důvěra |
A800 SXM4 80 GB NVIDIA | 80 GB | 2,040 GB/s | Aug 2022 | 1.3 GB | Q8_0 | Pohodlný |
|
1,440
tok/s
864–2,304 · nízká důvěra |
H100 CNX NVIDIA | 80 GB | 2,040 GB/s | Mar 2023 | 1.3 GB | Q8_0 | Pohodlný |
Rychlosti jsou odhady pro jednoho žadatele — jednu konverzaci najednou — vypočítané z šířky pásma paměti, velikosti modelu a kvantizace. Skutečný průchod se liší s výkonem inference a jeho verzí. Čísla zveřejněná výrobci hardwaru měří mnoho simultánních požadavků a jsou mnohem vyšší..
Na záznamu
Plná specifikace
Všechno o tomto modelu v záznamech. Většina z toho popisuje, jak byl trénován, spíše než jak funguje — užitečný kontext pro posouzení, kolik práce do něj bylo vynaloženo, a jak se srovnává s modely postavenými na jiné úrovni..
Původ
Kdo vytvořil tento model, kde a kdy byl publikován.
- Organizace
- Alibaba
- Typ organizace
- Industry
- Země
- China
- Publikováno
- 29 April 2025
Co to dělá
Problémové oblasti, pro které byl model vytvořen. Model může obsahovat několik z každého.
- Doména
- Language
- Úkol
- Language modeling/generation, Question answering, Mathematical reasoning, Quantitative reasoning, Code generation, Translation
Velikost
Jak velký je model a kolik dat byl trénován. Parametry jsou číslo, které rozhoduje, zda se vejde na danou grafickou kartu.
- parametry
- 600M
- Výcviková data
- tokens
- Epochy
- 1
Number of Parameters: 0.6B Number of Paramaters (Non-Embedding): 0.44B Number of Layers: 28 Number of Attention Heads (GQA): 16 for Q and 8 for KV Context Length: 32,768
36T
Výpočty pro trénink
Aritmetika prováděná k trénování modelu, měřená v operacích s plovoucí desetinnou čárkou. Je to měřítko toho, kolik stál tréninkový běh, ne jak rychle hotový model na vás odpovídá.
- Výpočty pro trénink
- 1.3 × 10²³ FLOP
- Jak bylo ustanoveno
- Operation counting
6 FLOP / parameter / token * 36 * 10^12 tokens * 0.6 * 10^9 parameters = 1.296e+23 FLOP
Dostupnost
Zda můžete získat model a spustit ho na svém vlastním hardwaru, což rozhoduje o tom, zda se některé z čísel grafických karet na této stránce vztahují.
- Hmotnosti
- Open — downloadable
- Přístup k modelu
- Open weights (unrestricted)
- Tréninkový kód
- Unreleased
- Hugging Face
- Qwen
Apache 2.0 https://huggingface.co/Qwen/Qwen3-0.6B-Base
Jak je to klasifikováno
Štítky aplikačních datových sad, které se používají při sledování významných modelů, a jak jistý je ve záznamu.
- Pravděpodobně nad 10²³ FLOP
- Yes
- Záznam důvěry
- Confident
Žrovy
Odkud tento záznam pochází a kdy byl naposledy zkontrolován.
- Reference
- Qwen3: Think Deeper, Act Faster
- Nap poslední aktualizace
- 28 November 2025
Extrémy
Deset nejrychlejších GPU, které běží Qwen3-0.6B
Seřazeno podle odhadovaných tokenů za sekundu, nejnovější karta první, kde se rychlosti shodují. Protože generování je omezeno šířkou pásma paměti, toto řazení následuje šířku pásma spíše než jakýkoli herní benchmark..
- 01 B300 288 GB · 8,000 GB/s · Q8_0 5,647 tok/s
- 02 B200 180 GB · 8,000 GB/s · Q8_0 5,647 tok/s
- 03 Radeon Instinct MI350X 288 GB · 8,190 GB/s · Q8_0 4,509 tok/s
- 04 Radeon Instinct MI355X 288 GB · 8,190 GB/s · Q8_0 4,509 tok/s
- 05 Radeon Instinct MI300 128 GB · 6,550 GB/s · Q8_0 3,606 tok/s
- 06 H200 NVL 141 GB · 4,890 GB/s · Q8_0 3,452 tok/s
- 07 H200 SXM 141 GB 141 GB · 4,890 GB/s · Q8_0 3,452 tok/s
- 08 Radeon Instinct MI325X 256 GB · 6,000 GB/s · Q8_0 3,304 tok/s
- 09 Radeon Instinct MI300A 128 GB · 5,325 GB/s · Q8_0 2,932 tok/s
- 10 Radeon Instinct MI300X 192 GB · 5,325 GB/s · Q8_0 2,932 tok/s
Nejmenší GPU, které ještě běží Qwen3-0.6B
Nejlevnější cesta dovnitř, podle kapacity paměti. Těsný fit spustí model, ale nenechá nic navíc na delší konverzaci..
- 01 GeForce RTX 4010 4 GB · Potřebuje 1.3 GB · Q8_0 · Pohodlný 67.8 tok/s
- 02 RTX A400 4 GB · Potřebuje 1.3 GB · Q8_0 · Pohodlný 67.8 tok/s
- 03 RTX 500 Mobile Ada Generation 4 GB · Potřebuje 1.3 GB · Q8_0 · Pohodlný 90.4 tok/s
- 04 GeForce RTX 3050 A Mobile 4 GB · Potřebuje 1.3 GB · Q8_0 · Pohodlný 136 tok/s
- 05 Jetson Orin Nano 4 GB 4 GB · Potřebuje 1.3 GB · Q8_0 · Pohodlný 24.1 tok/s
- 06 Radeon RX 6450M 4 GB · Potřebuje 1.3 GB · Q8_0 · Pohodlný 70.5 tok/s
- 07 Radeon RX 6550M 4 GB · Potřebuje 1.3 GB · Q8_0 · Pohodlný 79.3 tok/s
- 08 Radeon RX 6550S 4 GB · Potřebuje 1.3 GB · Q8_0 · Pohodlný 70.5 tok/s
- 09 Arc A310 4 GB · Potřebuje 1.3 GB · Q8_0 · Pohodlný 56.9 tok/s
- 10 Arc Pro A30M 4 GB · Potřebuje 1.3 GB · Q8_0 · Pohodlný 58.7 tok/s
Co čísla znamenají
Co potřebujete k tomu, abyste to spustili
Minimum karta
Tesla C1080
Potřeba paměti
1.3 GB
Nejrychlejší
5,647 tok/s
Qwen3-0.6B dosahuje počtu parametrů 600M. To je dost malé, že hardware je zřídkakdy překážkou, včetně karet starých několik let. Počet karet, které sledujeme, které to mohou spustit: 818.
Nejmenší hardware, který funguje, je Tesla C1080, s kapacitou VRAM 4 GB, spuštění na kompresi Q8_0 a vyrábějí kolem 61.4 tokenů za sekundu
Špičkový model je B200, generování přibližně 5,647 tokens za sekundu na základě šířky pásma VRAM 8,000 GB/s.
Co je tento MODEL
Qwen3-0.6B byl zveřejněn Alibaba, v zemi zaznamenané jako China, během April 2025. Vydavatelská organizace je kategorizována jako industry.
funguje v oblasti Language, a je zaznamenán jako vykonávající úkol language modeling/generation, Question answering, Mathematical reasoning, Quantitative reasoning, Code generation, Translation.
Otevřené váhy jsou to, co dává této stránce místo v kalkulátoru spíše než pouze v katalogu: je to model, který můžeš skutečně držet. Na Hugging Face je publikováno pod organizací Qwen.
Co rozhoduje o rychlosti
Polovina karet, které to drží, zvládne více než 158.6 tokenů za sekundu 809 z nich
Každá váha se účastní každého tokenu zde, takže šířka pásma je celá historie: hodnocení níže je ve skutečnosti hodnocením propustnosti paměti.
Jeho vnitřní architektura není v evidenci, takže paměť je přibližně odhadnuta z počtu parametrů a označena odpovídajícím způsobem. Očekávejte, že skutečná čísla se budou lišit, zejména u dlouhého kontextu.
Trénink a původ
Produkce toho vyžadovala aritmetiku v celkové výši přibližně 1.3 × 10²³ FLOP. Tato částka měří, kolik stál výroba modelu, a nemá žádný vliv na to, jak rychle odpovídá.
Krok za krokem
Jak vybrat GPU pro Qwen3-0.6B
Stůl výše již posoudil každou kartu, pro kterou máme specifikace, proti tomuto modelu. Dostání se k vaší odpovědi trvá šest kroků.
-
01
Přečtěte si nejprve číslo paměti
Začněte od toho, co skutečně potřebuje, což je požadavek na Qwen3-0.6B, potřebující kolem 1.3 GB při kompresi Q8_0. Tato čísla, nikoli hlavní výkon karty, rozhodují o tom, zda běží.
-
02
Rozhodněte, jak dlouho vaše konverzace běží
Nastavte kontext na to, co skutečně použijete. Cache roste s konverzací a to je obvyklý důvod, proč karta, která se zdála v pořádku, přestane vejít. Qwen3-0.6B.
-
03
Rozhodněte, jaké množství komprese přijmete
Každá KARTA spouští nejméně komprimovanou kopii, kterou může udržet., dosahující komprese Q8_0 na nejmenší kartě, která se vejde. Nastavení minimální kvality odstraňuje karty, které pouze splňují tuto kvalitu tím, že ji dále stlačují více, než byste chtěli, a udržuje srovnání na jedné úrovni.
-
04
Srovnejte TPS, ne specifikace
Seřaďte podle rychlosti, abyste viděli, jak si karty vedou. Qwen3-0.6B. Nebude to odpovídat hernímu pořádku, protože generace je omezena šířkou pásma paměti. Grafická karta, která vede seznam, je B200, na 5,647 tok/s
-
05
Zkontrolujte verdikt o vhodnosti před koupí
Tight fit běží, ale nenechává nic navíc pro delší konverzaci, v případě Qwen3-0.6B. Pohodlný znamená, že můžete později zvětšit kontext. Ten rozdíl má větší význam než pár tokenů za sekundu, takže kupte pro pohodlné, pokud to očekáváte.
-
06
Zkontrolujte kartu z druhé strany
Sledování KARTY až na její vlastní stránku ukazuje každý jiný model, který může držet, což je otázka, která následuje, jakmile se rozhodnete pro Qwen3-0.6B.
Odpovědi
Qwen3-0.6B — běžné otázky
Qwen3-0.6B— Kdo to vytvořil?
Bylo to publikováno společností Alibaba, zakládající se na China, organizace zařazená jako industry.
Qwen3-0.6B— Kdy byl vydán?
Bylo to zveřejněno v April 2025.
Qwen3-0.6B— K čemu se to používá?
funguje v oblasti Language, a je zaznamenáno jako zpracovávající úkol language modeling/generation, Question answering, Mathematical reasoning, Quantitative reasoning, Code generation, Translation. Toto jsou oblasti, kolem nichž byl navržen; popisují záměr spíše než tvrdou hranici.
Qwen3-0.6B— kde si to mohu stáhnout?
Jeho váhy jsou publikovány na Hugging Face, pod organizací Qwen. Na našem webu nenabízíme soubory modelů — tento web vypočítává, jaký hardware je potřebný pro jejich spuštění.
Qwen3-0.6B— kolik výpočetního výkonu bylo použito k jeho trénování?
Trénink spotřeboval kolem 1.3 × 10²³ FLOP. To měří, co stálo výrobu modelu, a neříká nic o tom, jak rychle odpovídá po natrénování — rychlost inferencí závisí na šířce pásma paměti, nikoli na rozpočtu na trénink.
Qwen3-0.6B— Mohu to spustit, pokud se to nevejde do mé GPU?
Pouze přenosem, což je obvykle falešná ekonomika: část držená v paměti systému zpomaluje celé to. Každá postava zde předpokládá, že celý model je umístěn na kartě.
Qwen3-0.6B— Běhalo by to rychleji na dvou GPU?
Dvě karty koupit paměť spíše než rychlost, což záleží pouze pokud jedna karta to nemůže udržet. Číslo, které může: 818. Takže druhá karta je tu zřídka odpovědí.
Qwen3-0.6B— proč se kvantizace liší mezi kartami?
Protože se kapacita liší, liší se i to, jak moc musí být stlačena. Počet odlišných úrovní v tabulce výše: 1. Větší karty získávají přesnější verzi a kvalita podlahy nad piny srovnává na jednu úroveň.
Qwen3-0.6B— Jak přesné jsou tyto odhady rychlosti?
Každé číslo je odvozeno od šířky pásma VRAM a velikosti modelu, není benchmarkováno, což je důvod, proč je každé publikováno jako rozsah spíše než jako jediné číslo. Jeden příklad: 3,388–9,035 tok/s na B200. Stejný model a karta se liší o třicet až padesát procent v závislosti na softwaru pro inferenci a jeho verzi.
Qwen3-0.6B— Jakou GPU potřebuji k jejímu spuštění?
Nejmenší karta v našem katalogu, která to udrží, je Tesla C1080, s kapacitou VRAM 4 GB. Spouští model při kompresi Q8_0 používající přibližně 1.3 GB, a produkuje přibližně 61.4 tokeny za sekundu. Celkový počet karet, které mohou model běžet: 818.
Qwen3-0.6B— jak rychle je to na GPU?
Záleží na kartě. Nejrychleji, jak to spočítáme, je B200, přibližně 5,647 tokenů za sekundu; nejpomalejší, který stále běží, zvládá výrazně méně. Rychlost čtení je kolem deseti tokenů za sekundu, a počet karet, které to zvládají: 809.
Qwen3-0.6B— kolik VRAM potřebuje?
Potřebuje asi 1.3 GB při kompresi Q8_0, která je ta nejmenší karta, která to používá. Méně komprese vyžaduje více: čísla ve sloupci paměti výše jsou přepočítána pro každou kartu, protože každá drží nejméně komprimovanou verzi, kterou může.
Qwen3-0.6B— mohu to spustit na GPU držící 8 GB?
Ano. GPU kartu CMP 170HX 8 GB, držení 8 GB, provozuje ho při kompresi Q8_0, používající přibližně 1.3 GB a generováním zhruba 1,052 tokenů za sekundu. Fit je pohodlný.
Qwen3-0.6B— mohu to spustit na GPU držící 12 GB?
Ano. GPU kartu GeForce RTX 3080 Ti, držení 12 GB, provozuje ho při kompresi Q8_0, používající přibližně 1.3 GB a generováním zhruba 644 tokenů za sekundu. Fit je pohodlný.
Qwen3-0.6B— mohu to spustit na GPU držící 16 GB?
Ano. GPU kartu Tesla V100 SXM2 16 GB, držení 16 GB, provozuje ho při kompresi Q8_0, používající přibližně 1.3 GB a generováním zhruba 798 tokenů za sekundu. Fit je pohodlný.
Qwen3-0.6B— mohu to spustit na GPU držící 24 GB?
Ano. GPU kartu GeForce RTX 5090 D V2, držení 24 GB, provozuje ho při kompresi Q8_0, používající přibližně 1.3 GB a generováním zhruba 946 tokenů za sekundu. Fit je pohodlný.
Qwen3-0.6B— Je to OPEN SOURCE?
Jeho váhy jsou zveřejněny, takže si je lze stáhnout a spustit na vlastním hardwaru. Všimněte si, že open WEIGHTS není totéž co open SOURCE v plném smyslu — neříká nic o tréninkových datech, tréninkovém kódu nebo obchodních podmínkách připojených.
Qwen3-0.6B— kolik má parametrů?
Má počet parametrů 600M. Number of Parameters: 0.6B Number of Paramaters (Non-Embedding): 0.44B Number of Layers: 28 Number of Attention Heads (GQA): 16 for Q and 8 for KV Context Length: 32,768. Tato cifra je celková a rozhoduje o tom, kolik VRAM model potřebuje — přibližně půl gigabajtu na miliardu při kompresi, kterou většina lidí používá.
Druhý směr
Díváte se na to z druhé strany?
Tato stránka začíná od modelu. Pokud již vlastníte kartu a chcete vědět všechno, co bude spuštěno, začněte raději od hardwaru.