ResNeXt-50 TPS kalkulátor
Každá karta níže je hodnocena podle tohoto modelu na základě délky kontextu a minimální kvality, kterou si zvolíte. Rychlost je odhad pro jednotlivý požadavek, vypočítaná z paměťové šířky karty a velikosti modelu po kompresi..
Vypočteno pro tento model
818 karty, které máme specifikace pro
Nejmenší karta, která se vejde
Tesla C1080
4 GB · Q8_0 · 1,475 tok/s
Nejrychlejší karta
B200
135,529 tok/s · 180 GB
Které GPU mohou spustit ResNeXt-50?
Nastavte vstupy, přečtěte si odpověď
Delší konverzace potřebuje více paměti, což může tento model vytlačit z menších karet..
Skrývá karty, které by se do modelu vešly pouze jeho stlačením pod tento bod.
818 karty odpovídají
Vypočítávání| Potřebuje | Kvantisace | Pohodlné | |||||
|---|---|---|---|---|---|---|---|
|
135,529
tok/s
81,318–216,847 · nízká důvěra |
B200 NVIDIA | 180 GB | 8,000 GB/s | Jan 2024 | 0.7 GB | Q8_0 | Pohodlný |
|
135,529
tok/s
81,318–216,847 · nízká důvěra |
B300 NVIDIA | 288 GB | 8,000 GB/s | Sep 2025 | 0.7 GB | Q8_0 | Pohodlný |
|
108,224
tok/s
64,934–173,158 · nízká důvěra |
Radeon Instinct MI350X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 0.7 GB | Q8_0 | Pohodlný |
|
108,224
tok/s
64,934–173,158 · nízká důvěra |
Radeon Instinct MI355X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 0.7 GB | Q8_0 | Pohodlný |
|
86,552
tok/s
51,931–138,484 · nízká důvěra |
Radeon Instinct MI300 AMD | 128 GB | 6,550 GB/s | Jan 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
82,842
tok/s
49,705–132,548 · nízká důvěra |
H200 NVL NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 0.7 GB | Q8_0 | Pohodlný |
|
82,842
tok/s
49,705–132,548 · nízká důvěra |
H200 SXM 141 GB NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 0.7 GB | Q8_0 | Pohodlný |
|
79,285
tok/s
47,571–126,856 · nízká důvěra |
Radeon Instinct MI325X AMD | 256 GB | 6,000 GB/s | Oct 2024 | 0.7 GB | Q8_0 | Pohodlný |
|
70,365
tok/s
42,219–112,584 · nízká důvěra |
Radeon Instinct MI300A AMD | 128 GB | 5,325 GB/s | Dec 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
70,365
tok/s
42,219–112,584 · nízká důvěra |
Radeon Instinct MI300X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
70,365
tok/s
42,219–112,584 · nízká důvěra |
Radeon Instinct MI308X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
66,748
tok/s
40,049–106,797 · nízká důvěra |
H100 NVL 94 GB NVIDIA | 94 GB | 3,940 GB/s | Mar 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
56,922
tok/s
34,153–91,076 · nízká důvěra |
H100 PCIe 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
56,922
tok/s
34,153–91,076 · nízká důvěra |
H100 SXM5 80 GB NVIDIA | 80 GB | 3,360 GB/s | Oct 2022 | 0.7 GB | Q8_0 | Pohodlný |
|
56,922
tok/s
34,153–91,076 · nízká důvěra |
H100 SXM5 94 GB NVIDIA | 94 GB | 3,360 GB/s | Mar 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
56,922
tok/s
34,153–91,076 · nízká důvěra |
H100 SXM5 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
56,922
tok/s
34,153–91,076 · nízká důvěra |
H800 SXM5 NVIDIA | 80 GB | 3,360 GB/s | Mar 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
43,342
tok/s
26,005–69,348 · nízká důvěra |
Radeon Instinct MI250 AMD | 128 GB | 3,280 GB/s | Nov 2021 | 0.7 GB | Q8_0 | Pohodlný |
|
43,342
tok/s
26,005–69,348 · nízká důvěra |
Radeon Instinct MI250X AMD | 128 GB | 3,280 GB/s | Nov 2021 | 0.7 GB | Q8_0 | Pohodlný |
|
36,119
tok/s
21,671–57,790 · nízká důvěra |
Data Center GPU Max 1550 Intel | 128 GB | 3,280 GB/s | Jan 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
35,348
tok/s
21,209–56,556 · nízká důvěra |
Data Center GPU Max Subsystem Intel | 128 GB | 3,210 GB/s | Jan 2023 | 0.7 GB | Q8_0 | Pohodlný |
|
34,560
tok/s
20,736–55,296 · nízká důvěra |
A100 SXM4 80 GB NVIDIA | 80 GB | 2,040 GB/s | Nov 2020 | 0.7 GB | Q8_0 | Pohodlný |
|
34,560
tok/s
20,736–55,296 · nízká důvěra |
A100X NVIDIA | 80 GB | 2,040 GB/s | Jun 2021 | 0.7 GB | Q8_0 | Pohodlný |
|
34,560
tok/s
20,736–55,296 · nízká důvěra |
A800 SXM4 80 GB NVIDIA | 80 GB | 2,040 GB/s | Aug 2022 | 0.7 GB | Q8_0 | Pohodlný |
|
34,560
tok/s
20,736–55,296 · nízká důvěra |
H100 CNX NVIDIA | 80 GB | 2,040 GB/s | Mar 2023 | 0.7 GB | Q8_0 | Pohodlný |
Rychlosti jsou odhady pro jednoho žadatele — jednu konverzaci najednou — vypočítané z šířky pásma paměti, velikosti modelu a kvantizace. Skutečný průchod se liší s výkonem inference a jeho verzí. Čísla zveřejněná výrobci hardwaru měří mnoho simultánních požadavků a jsou mnohem vyšší..
Na záznamu
Plná specifikace
Všechno o tomto modelu v záznamech. Většina z toho popisuje, jak byl trénován, spíše než jak funguje — užitečný kontext pro posouzení, kolik práce do něj bylo vynaloženo, a jak se srovnává s modely postavenými na jiné úrovni..
Původ
Kdo vytvořil tento model, kde a kdy byl publikován.
- Organizace
- University of California San Diego,Facebook
- Typ organizace
- Academia,Industry
- Země
- United States of America
- Publikováno
- 16 November 2016
- Autoři
- Saining Xie, Ross Girshick, Piotr Dollár, Zhuowen Tu, Kaiming He
Co to dělá
Problémové oblasti, pro které byl model vytvořen. Model může obsahovat několik z každého.
- Doména
- Vision
- Úkol
- Image classification
- Číselný formát
- FP32
Velikost
Jak velký je model a kolik dat byl trénován. Parametry jsou číslo, které rozhoduje, zda se vejde na danou grafickou kartu.
- parametry
- 25M
- Výcviková data
- 1,280,000 tokens
"If you’re thinking about ResNets, yes, they are related. ResNeXt-50 has 25M parameters (ResNet-50 has 25.5M)." https://towardsdatascience.com/illustrated-10-cnn-architectures-95d78ace614d
Dostupnost
Zda můžete získat model a spustit ho na svém vlastním hardwaru, což rozhoduje o tom, zda se některé z čísel grafických karet na této stránce vztahují.
- Hmotnosti
- Open — downloadable
- Přístup k modelu
- Open weights (unrestricted)
- Tréninkový kód
- Open source
BSD License https://github.com/facebookresearch/ResNeXt?tab=readme-ov-file
Jak je to klasifikováno
Štítky aplikačních datových sad, které se používají při sledování významných modelů, a jak jistý je ve záznamu.
- Proč je to sledováno
- Highly cited
- Záznam důvěry
- Likely
- Citace
- 11,620
Žrovy
Odkud tento záznam pochází a kdy byl naposledy zkontrolován.
- Reference
- Aggregated Residual Transformations for Deep Neural Networks
- Nap poslední aktualizace
- 25 May 2026
Extrémy
Deset nejrychlejších GPU, které běží ResNeXt-50
Seřazeno podle odhadovaných tokenů za sekundu, nejnovější karta první, kde se rychlosti shodují. Protože generování je omezeno šířkou pásma paměti, toto řazení následuje šířku pásma spíše než jakýkoli herní benchmark..
- 01 B300 288 GB · 8,000 GB/s · Q8_0 135,529 tok/s
- 02 B200 180 GB · 8,000 GB/s · Q8_0 135,529 tok/s
- 03 Radeon Instinct MI350X 288 GB · 8,190 GB/s · Q8_0 108,224 tok/s
- 04 Radeon Instinct MI355X 288 GB · 8,190 GB/s · Q8_0 108,224 tok/s
- 05 Radeon Instinct MI300 128 GB · 6,550 GB/s · Q8_0 86,552 tok/s
- 06 H200 NVL 141 GB · 4,890 GB/s · Q8_0 82,842 tok/s
- 07 H200 SXM 141 GB 141 GB · 4,890 GB/s · Q8_0 82,842 tok/s
- 08 Radeon Instinct MI325X 256 GB · 6,000 GB/s · Q8_0 79,285 tok/s
- 09 Radeon Instinct MI300A 128 GB · 5,325 GB/s · Q8_0 70,365 tok/s
- 10 Radeon Instinct MI300X 192 GB · 5,325 GB/s · Q8_0 70,365 tok/s
Nejmenší GPU, které ještě běží ResNeXt-50
Nejlevnější cesta dovnitř, podle kapacity paměti. Těsný fit spustí model, ale nenechá nic navíc na delší konverzaci..
- 01 GeForce RTX 4010 4 GB · Potřebuje 0.7 GB · Q8_0 · Pohodlný 1,626 tok/s
- 02 RTX A400 4 GB · Potřebuje 0.7 GB · Q8_0 · Pohodlný 1,626 tok/s
- 03 RTX 500 Mobile Ada Generation 4 GB · Potřebuje 0.7 GB · Q8_0 · Pohodlný 2,168 tok/s
- 04 GeForce RTX 3050 A Mobile 4 GB · Potřebuje 0.7 GB · Q8_0 · Pohodlný 3,253 tok/s
- 05 Jetson Orin Nano 4 GB 4 GB · Potřebuje 0.7 GB · Q8_0 · Pohodlný 578 tok/s
- 06 Radeon RX 6450M 4 GB · Potřebuje 0.7 GB · Q8_0 · Pohodlný 1,691 tok/s
- 07 Radeon RX 6550M 4 GB · Potřebuje 0.7 GB · Q8_0 · Pohodlný 1,903 tok/s
- 08 Radeon RX 6550S 4 GB · Potřebuje 0.7 GB · Q8_0 · Pohodlný 1,691 tok/s
- 09 Arc A310 4 GB · Potřebuje 0.7 GB · Q8_0 · Pohodlný 1,365 tok/s
- 10 Arc Pro A30M 4 GB · Potřebuje 0.7 GB · Q8_0 · Pohodlný 1,410 tok/s
Co čísla znamenají
Hardwareová stránka
Minimum karta
Tesla C1080
Potřeba paměti
0.7 GB
Nejrychlejší
135,529 tok/s
ResNeXt-50 dosahuje počtu parametrů 25M. To je dost malé, že hardware je zřídkakdy překážkou, včetně karet starých několik let. Počet karet, které sledujeme, které to mohou spustit: 818.
Na nízkém konci se to řeší pomocí Tesla C1080, s kapacitou VRAM 4 GB, spuštění na kompresi Q8_0 a vyrábějí kolem 1,475 tokenů za sekundu
Na druhém konci sedí B200, generování přibližně 135,529 tokens za sekundu na základě šířky pásma VRAM 8,000 GB/s.
Co je tento MODEL
ResNeXt-50 byl zveřejněn University of California San Diego,Facebook, v zemi zaznamenané jako United States of America, během November 2016. Vydavatelská organizace je kategorizována jako academia,Industry.
funguje v oblasti Vision, a je zaznamenán jako vykonávající úkol image classification.
Otevřené váhy jsou to, co dává této stránce místo v kalkulátoru spíše než pouze v katalogu: je to model, který můžeš skutečně držet.
Co rozhoduje o rychlosti
Mediánový výsledek je kolem 3,805.7 tokenů za sekundu. Producing text faster than most people read it: 818 z nich
Každá váha se účastní každého tokenu zde, takže šířka pásma je celá historie: hodnocení níže je ve skutečnosti hodnocením propustnosti paměti.
Bez rozložení pozornosti v záznamu je sloupec paměti přibližný. Je dost blízko na to, aby se podle něj vybralo hardware, a je nejméně spolehlivý při dlouhém kontextu.
Jak bylo trénováno
Tréninková sada běžela na přibližně 1,280,000 tokeny textu
Jeho kritérium zahrnutí: highly cited.
Krok za krokem
Jak vybrat GPU pro ResNeXt-50
Stůl výše již posoudil každou kartu, pro kterou máme specifikace, proti tomuto modelu. Dostání se k vaší odpovědi trvá šest kroků.
-
01
Začněte od sloupce paměti
Každá KARTA zde byla zkontrolována proti ResNeXt-50, potřebující kolem 0.7 GB při kompresi Q8_0. Žádné množství výpočetního výkonu nenahradí kartu, která to nemůže udržet.
-
02
Nastavte délku kontextu, se kterou budete pracovat
Nastavte kontext na to, co skutečně použijete. Cache roste s konverzací a to je obvyklý důvod, proč karta, která se zdála v pořádku, přestane vejít. ResNeXt-50.
-
03
Vyberte, jak moc to budete komprimovat.
Každá KARTA spouští nejméně komprimovanou kopii, kterou může udržet., dosahující komprese Q8_0 na nejmenší kartě, která se vejde. Nastavení minimální kvality odstraňuje karty, které pouze splňují tuto kvalitu tím, že ji dále stlačují více, než byste chtěli, a udržuje srovnání na jedné úrovni.
-
04
Třídit podle rychlosti
Rychlostní řazení je v podstatě řazením podle šířky pásma paměti, pro ResNeXt-50. Nebude to odpovídat hernímu pořádku, protože generace je omezena šířkou pásma paměti. Grafická karta, která vede seznam, je B200, na 135,529 tok/s
-
05
Podívejte se na rezervu, ne jen na padnutí
Tight znamená, že se načítá a funguje bez možnosti později zvýšit context length, v případě ResNeXt-50. Pohodlný znamená, že můžete později zvětšit kontext. Ten rozdíl má větší význam než pár tokenů za sekundu, takže kupte pro pohodlné, pokud to očekáváte.
-
06
Zkontrolujte kartu z druhé strany
Každý název karty odkazuje na její vlastní stránku, která provádí stejný výpočet v celém katalogu modelů. Karta se obvykle kupuje pro více než jeden model, takže se vyplatí se podívat před tím, než koupíte. ResNeXt-50.
Odpovědi
ResNeXt-50 — běžné otázky
ResNeXt-50— Jak přesné jsou tyto odhady rychlosti?
Toto jsou odhady s reálnými chybami a kterýkoli z nich může rozumně spadnout kamkoli v jeho publikovaném rozmezí v závislosti na tom, který run AI model použijete. Nejrychlejší výsledek zde: 81,318–216,847 tok/s na B200. Stejný model a karta se liší o třicet až padesát procent v závislosti na softwaru pro inferenci a jeho verzi.
ResNeXt-50— Jakou GPU potřebuji k jejímu spuštění?
Nejmenší karta v našem katalogu, která to udrží, je Tesla C1080, s kapacitou VRAM 4 GB. Spouští model při kompresi Q8_0 používající přibližně 0.7 GB, a produkuje přibližně 1,475 tokeny za sekundu. Celkový počet karet, které mohou model běžet: 818.
ResNeXt-50— jak rychle je to na GPU?
Záleží na kartě. Nejrychleji, jak to spočítáme, je B200, přibližně 135,529 tokenů za sekundu; nejpomalejší, který stále běží, zvládá výrazně méně. Rychlost čtení je kolem deseti tokenů za sekundu, a počet karet, které to zvládají: 818.
ResNeXt-50— kolik VRAM potřebuje?
Potřebuje asi 0.7 GB při kompresi Q8_0, která je ta nejmenší karta, která to používá. Méně komprese vyžaduje více: čísla ve sloupci paměti výše jsou přepočítána pro každou kartu, protože každá drží nejméně komprimovanou verzi, kterou může.
ResNeXt-50— mohu to spustit na GPU držící 8 GB?
Ano. GPU kartu CMP 170HX 8 GB, držení 8 GB, provozuje ho při kompresi Q8_0, používající přibližně 0.7 GB a generováním zhruba 25,242 tokenů za sekundu. Fit je pohodlný.
ResNeXt-50— mohu to spustit na GPU držící 12 GB?
Ano. GPU kartu GeForce RTX 3080 Ti, držení 12 GB, provozuje ho při kompresi Q8_0, používající přibližně 0.7 GB a generováním zhruba 15,457 tokenů za sekundu. Fit je pohodlný.
ResNeXt-50— mohu to spustit na GPU držící 16 GB?
Ano. GPU kartu Tesla V100 SXM2 16 GB, držení 16 GB, provozuje ho při kompresi Q8_0, používající přibližně 0.7 GB a generováním zhruba 19,144 tokenů za sekundu. Fit je pohodlný.
ResNeXt-50— mohu to spustit na GPU držící 24 GB?
Ano. GPU kartu GeForce RTX 5090 D V2, držení 24 GB, provozuje ho při kompresi Q8_0, používající přibližně 0.7 GB a generováním zhruba 22,701 tokenů za sekundu. Fit je pohodlný.
ResNeXt-50— Je to OPEN SOURCE?
Jeho váhy jsou zveřejněny, takže si je lze stáhnout a spustit na vlastním hardwaru. Všimněte si, že open WEIGHTS není totéž co open SOURCE v plném smyslu — neříká nic o tréninkových datech, tréninkovém kódu nebo obchodních podmínkách připojených.
ResNeXt-50— kolik má parametrů?
Má počet parametrů 25M. "If you’re thinking about ResNets, yes, they are related. ResNeXt-50 has 25M parameters (ResNet-50 has 25.5M)." https://towardsdatascience.com/illustrated-10-cnn-architectures-95d78ace614d. Tato cifra je celková a rozhoduje o tom, kolik VRAM model potřebuje — přibližně půl gigabajtu na miliardu při kompresi, kterou většina lidí používá.
ResNeXt-50— Kdo to vytvořil?
Bylo to publikováno společností University of California San Diego,Facebook, zakládající se na United States of America, organizace zařazená jako academia,Industry.
ResNeXt-50— Kdy byl vydán?
Bylo to zveřejněno v November 2016. Schopnost na parametr se od té doby výrazně zlepšila, takže novější model stejné velikosti je často lepším využitím stejného hardwaru.
ResNeXt-50— K čemu se to používá?
funguje v oblasti Vision, a je zaznamenáno jako zpracovávající úkol image classification. Toto jsou oblasti, kolem nichž byl navržen; popisují záměr spíše než tvrdou hranici.
ResNeXt-50— kde si to mohu stáhnout?
Váhy jsou zveřejněny, i když nemáme odkaz na repozitář. Tato stránka vypočítává hardwarové požadavky spíše než aby hostila modelové soubory.
ResNeXt-50— Mohu to spustit, pokud se to nevejde do mé GPU?
Částečně. Vrstvy, které se nevejdou, sedí v systémové paměti a běží jen při zlomku rychlosti, takže většinou odložený model není často použitelný. Každá postava zde předpokládá, že celý model je umístěn na kartě.
ResNeXt-50— Běhalo by to rychleji na dvou GPU?
Dvě karty koupit paměť spíše než rychlost, což záleží pouze pokud jedna karta to nemůže udržet. Číslo, které může: 818. Takže druhá karta je tu zřídka odpovědí.
ResNeXt-50— proč se kvantizace liší mezi kartami?
Každá KARTA je zobrazena, jak běží nejméně komprimovaná kopie, kterou může udržet. Počet různých úrovní komprese napříč KARTAMI, které ji vejít: 1. Větší karty získávají přesnější verzi a kvalita podlahy nad piny srovnává na jednu úroveň.
Druhý směr
Díváte se na to z druhé strany?
Tato stránka začíná od modelu. Pokud již vlastníte kartu a chcete vědět všechno, co bude spuštěno, začněte raději od hardwaru.