Masked Autoencoders ViT-H TPS kalkulátor
Každá karta níže je hodnocena podle tohoto modelu na základě délky kontextu a minimální kvality, kterou si zvolíte. Rychlost je odhad pro jednotlivý požadavek, vypočítaná z paměťové šířky karty a velikosti modelu po kompresi..
Vypočteno pro tento model
818 karty, které máme specifikace pro
Nejmenší karta, která se vejde
Tesla C1080
4 GB · Q8_0 · 58.3 tok/s
Nejrychlejší karta
B200
5,361 tok/s · 180 GB
Které GPU mohou spustit Masked Autoencoders ViT-H?
Nastavte vstupy, přečtěte si odpověď
Delší konverzace potřebuje více paměti, což může tento model vytlačit z menších karet..
Skrývá karty, které by se do modelu vešly pouze jeho stlačením pod tento bod.
818 karty odpovídají
Vypočítávání| Potřebuje | Kvantisace | Pohodlné | |||||
|---|---|---|---|---|---|---|---|
|
5,361
tok/s
3,217–8,578 · nízká důvěra |
B200 NVIDIA | 180 GB | 8,000 GB/s | Jan 2024 | 1.4 GB | Q8_0 | Pohodlný |
|
5,361
tok/s
3,217–8,578 · nízká důvěra |
B300 NVIDIA | 288 GB | 8,000 GB/s | Sep 2025 | 1.4 GB | Q8_0 | Pohodlný |
|
4,281
tok/s
2,569–6,850 · nízká důvěra |
Radeon Instinct MI350X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 1.4 GB | Q8_0 | Pohodlný |
|
4,281
tok/s
2,569–6,850 · nízká důvěra |
Radeon Instinct MI355X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 1.4 GB | Q8_0 | Pohodlný |
|
3,424
tok/s
2,054–5,478 · nízká důvěra |
Radeon Instinct MI300 AMD | 128 GB | 6,550 GB/s | Jan 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
3,277
tok/s
1,966–5,243 · nízká důvěra |
H200 NVL NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 1.4 GB | Q8_0 | Pohodlný |
|
3,277
tok/s
1,966–5,243 · nízká důvěra |
H200 SXM 141 GB NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 1.4 GB | Q8_0 | Pohodlný |
|
3,136
tok/s
1,882–5,018 · nízká důvěra |
Radeon Instinct MI325X AMD | 256 GB | 6,000 GB/s | Oct 2024 | 1.4 GB | Q8_0 | Pohodlný |
|
2,783
tok/s
1,670–4,453 · nízká důvěra |
Radeon Instinct MI300A AMD | 128 GB | 5,325 GB/s | Dec 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
2,783
tok/s
1,670–4,453 · nízká důvěra |
Radeon Instinct MI300X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
2,783
tok/s
1,670–4,453 · nízká důvěra |
Radeon Instinct MI308X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
2,640
tok/s
1,584–4,225 · nízká důvěra |
H100 NVL 94 GB NVIDIA | 94 GB | 3,940 GB/s | Mar 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
2,252
tok/s
1,351–3,603 · nízká důvěra |
H100 PCIe 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
2,252
tok/s
1,351–3,603 · nízká důvěra |
H100 SXM5 80 GB NVIDIA | 80 GB | 3,360 GB/s | Oct 2022 | 1.4 GB | Q8_0 | Pohodlný |
|
2,252
tok/s
1,351–3,603 · nízká důvěra |
H100 SXM5 94 GB NVIDIA | 94 GB | 3,360 GB/s | Mar 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
2,252
tok/s
1,351–3,603 · nízká důvěra |
H100 SXM5 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
2,252
tok/s
1,351–3,603 · nízká důvěra |
H800 SXM5 NVIDIA | 80 GB | 3,360 GB/s | Mar 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
1,714
tok/s
1,029–2,743 · nízká důvěra |
Radeon Instinct MI250 AMD | 128 GB | 3,280 GB/s | Nov 2021 | 1.4 GB | Q8_0 | Pohodlný |
|
1,714
tok/s
1,029–2,743 · nízká důvěra |
Radeon Instinct MI250X AMD | 128 GB | 3,280 GB/s | Nov 2021 | 1.4 GB | Q8_0 | Pohodlný |
|
1,429
tok/s
857–2,286 · nízká důvěra |
Data Center GPU Max 1550 Intel | 128 GB | 3,280 GB/s | Jan 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
1,398
tok/s
839–2,237 · nízká důvěra |
Data Center GPU Max Subsystem Intel | 128 GB | 3,210 GB/s | Jan 2023 | 1.4 GB | Q8_0 | Pohodlný |
|
1,367
tok/s
820–2,187 · nízká důvěra |
A100 SXM4 80 GB NVIDIA | 80 GB | 2,040 GB/s | Nov 2020 | 1.4 GB | Q8_0 | Pohodlný |
|
1,367
tok/s
820–2,187 · nízká důvěra |
A100X NVIDIA | 80 GB | 2,040 GB/s | Jun 2021 | 1.4 GB | Q8_0 | Pohodlný |
|
1,367
tok/s
820–2,187 · nízká důvěra |
A800 SXM4 80 GB NVIDIA | 80 GB | 2,040 GB/s | Aug 2022 | 1.4 GB | Q8_0 | Pohodlný |
|
1,367
tok/s
820–2,187 · nízká důvěra |
H100 CNX NVIDIA | 80 GB | 2,040 GB/s | Mar 2023 | 1.4 GB | Q8_0 | Pohodlný |
Rychlosti jsou odhady pro jednoho žadatele — jednu konverzaci najednou — vypočítané z šířky pásma paměti, velikosti modelu a kvantizace. Skutečný průchod se liší s výkonem inference a jeho verzí. Čísla zveřejněná výrobci hardwaru měří mnoho simultánních požadavků a jsou mnohem vyšší..
Na záznamu
Plná specifikace
Všechno o tomto modelu v záznamech. Většina z toho popisuje, jak byl trénován, spíše než jak funguje — užitečný kontext pro posouzení, kolik práce do něj bylo vynaloženo, a jak se srovnává s modely postavenými na jiné úrovni..
Původ
Kdo vytvořil tento model, kde a kdy byl publikován.
- Organizace
- Facebook AI Research
- Typ organizace
- Industry
- Země
- United States of America, France
- Publikováno
- 11 November 2021
- Autoři
- Kaiming He, Xinlei Chen, Saining Xie, Yanghao Li, Piotr Dollár, Ross Girshick
Co to dělá
Problémové oblasti, pro které byl model vytvořen. Model může obsahovat několik z každého.
- Doména
- Vision
- Úkol
- Semantic segmentation, Image classification, Image generation
- Přístup
- Self-supervised learning
- Základní model
- ViT-Huge/14
Velikost
Jak velký je model a kolik dat byl trénován. Parametry jsou číslo, které rozhoduje, zda se vejde na danou grafickou kartu.
- parametry
- 632M
- Výcviková data
- 327,978,752 tokens
- Epochy
- 1,600
Three models: ViT-B (86M), ViT-L (304M), ViT-H (632M)
Výpočty pro trénink
Aritmetika prováděná k trénování modelu, měřená v operacích s plovoucí desetinnou čárkou. Je to měřítko toho, kolik stál tréninkový běh, ne jak rychle hotový model na vás odpovídá.
- Výpočty pro trénink
- 4.6 × 10²⁰ FLOP
- Jak bylo ustanoveno
- Hardware,Operation counting
128 TPU-v3 cores trained for 1600 epochs. Times are given for 800 epochs in Table 2; largest model (ViT-H) took 34.5 hrs for 800. 128 TPU-v3 cores * 0.5 chips/core * 34.5 hours * 2 * 1.23E+14 FLOP/sec / chip * 3600 sec/hour * 40% utilization = 7.84e20 FLOP Note that the operations counting method disagrees: 2 × 632000000 connections × 3 × 1281167 training examples × 1600 of epochs = 7.8e18 FLOP Manual calculation with `calflops` package roughly agrees with hardware-time calculation: 286.21 …
Tréninkový běh
Co fyzicky vyžadovalo trénování: které čipy, kolik, jak dlouho a co to vyžadovalo ze zásuvky.
- Doba reálného času
- 69 hours
Table 2 gives wall times for training ViT-L and ViT-H to 800 epochs; later it is stated that the systems are each trained for 1600 epochs. (34.5 hours / 800 epochs) * 1600 epochs = 69 hours
Dostupnost
Zda můžete získat model a spustit ho na svém vlastním hardwaru, což rozhoduje o tom, zda se některé z čísel grafických karet na této stránce vztahují.
- Hmotnosti
- Open — downloadable
- Přístup k modelu
- Open weights (non-commercial)
- Tréninkový kód
- Open (non-commercial)
Code at https://github.com/facebookresearch/mae This project is under the CC-BY-NC 4.0 license training code: https://github.com/facebookresearch/mae/blob/main/PRETRAIN.md
Jak je to klasifikováno
Štítky aplikačních datových sad, které se používají při sledování významných modelů, a jak jistý je ve záznamu.
- Proč je to sledováno
- Highly cited,SOTA improvement
- Záznam důvěry
- Speculative
- Citace
- 11,449
"By fine-tuning with a 448 size, we achieve 87.8% accuracy, using only IN1K data. The previous best accuracy, among all methods using only IN1K data, is 87.1% (512 size)... We improve over the state-of-the-art by a nontrivial margin in the highly competitive benchmark of IN1K (no external data). Our result is based on vanilla ViT, and we expect advanced networks will perform better." See Table 3
Žrovy
Odkud tento záznam pochází a kdy byl naposledy zkontrolován.
- Reference
- Masked Autoencoders Are Scalable Vision Learners
- Nap poslední aktualizace
- 25 May 2026
Extrémy
Deset nejrychlejších GPU, které běží Masked Autoencoders ViT-H
Seřazeno podle odhadovaných tokenů za sekundu, nejnovější karta první, kde se rychlosti shodují. Protože generování je omezeno šířkou pásma paměti, toto řazení následuje šířku pásma spíše než jakýkoli herní benchmark..
- 01 B300 288 GB · 8,000 GB/s · Q8_0 5,361 tok/s
- 02 B200 180 GB · 8,000 GB/s · Q8_0 5,361 tok/s
- 03 Radeon Instinct MI350X 288 GB · 8,190 GB/s · Q8_0 4,281 tok/s
- 04 Radeon Instinct MI355X 288 GB · 8,190 GB/s · Q8_0 4,281 tok/s
- 05 Radeon Instinct MI300 128 GB · 6,550 GB/s · Q8_0 3,424 tok/s
- 06 H200 NVL 141 GB · 4,890 GB/s · Q8_0 3,277 tok/s
- 07 H200 SXM 141 GB 141 GB · 4,890 GB/s · Q8_0 3,277 tok/s
- 08 Radeon Instinct MI325X 256 GB · 6,000 GB/s · Q8_0 3,136 tok/s
- 09 Radeon Instinct MI300A 128 GB · 5,325 GB/s · Q8_0 2,783 tok/s
- 10 Radeon Instinct MI300X 192 GB · 5,325 GB/s · Q8_0 2,783 tok/s
Nejmenší GPU, které ještě běží Masked Autoencoders ViT-H
Nejlevnější cesta dovnitř, podle kapacity paměti. Těsný fit spustí model, ale nenechá nic navíc na delší konverzaci..
- 01 GeForce RTX 4010 4 GB · Potřebuje 1.4 GB · Q8_0 · Pohodlný 64.3 tok/s
- 02 RTX A400 4 GB · Potřebuje 1.4 GB · Q8_0 · Pohodlný 64.3 tok/s
- 03 RTX 500 Mobile Ada Generation 4 GB · Potřebuje 1.4 GB · Q8_0 · Pohodlný 85.8 tok/s
- 04 GeForce RTX 3050 A Mobile 4 GB · Potřebuje 1.4 GB · Q8_0 · Pohodlný 129 tok/s
- 05 Jetson Orin Nano 4 GB 4 GB · Potřebuje 1.4 GB · Q8_0 · Pohodlný 22.9 tok/s
- 06 Radeon RX 6450M 4 GB · Potřebuje 1.4 GB · Q8_0 · Pohodlný 66.9 tok/s
- 07 Radeon RX 6550M 4 GB · Potřebuje 1.4 GB · Q8_0 · Pohodlný 75.3 tok/s
- 08 Radeon RX 6550S 4 GB · Potřebuje 1.4 GB · Q8_0 · Pohodlný 66.9 tok/s
- 09 Arc A310 4 GB · Potřebuje 1.4 GB · Q8_0 · Pohodlný 54.0 tok/s
- 10 Arc Pro A30M 4 GB · Potřebuje 1.4 GB · Q8_0 · Pohodlný 55.8 tok/s
Co čísla znamenají
Co je potřeba k provozování tohoto modelu
Minimum karta
Tesla C1080
Potřeba paměti
1.4 GB
Nejrychlejší
5,361 tok/s
Masked Autoencoders ViT-H dosahuje počtu parametrů 632M. To je dost malé, že hardware je zřídkakdy překážkou, včetně karet starých několik let. Počet karet, které sledujeme, které to mohou spustit: 818.
Nejmenší karta, která to pojme, je Tesla C1080, s kapacitou VRAM 4 GB, spuštění na kompresi Q8_0 a vyrábějí kolem 58.3 tokenů za sekundu
Nejrychlejší výsledek pochází z B200, generování přibližně 5,361 tokens za sekundu na základě šířky pásma VRAM 8,000 GB/s.
Odkud to přišlo
Masked Autoencoders ViT-H byl zveřejněn Facebook AI Research, v zemi zaznamenané jako United States of America, během November 2021. Kategorie, do které vydavatel spadá, je industry.
funguje v oblasti Vision, a je zaznamenán jako vykonávající úkol semantic segmentation, Image classification, Image generation.
Místo toho, aby byl trénován od nuly, je odvozen z ViT-Huge/14. To je důvod, proč sdílí obecný tvar a velikost základního modelu.
Protože byly jeho váhy uvolněny, nic ohledně jeho spuštění nezávisí na dostupnosti poskytovatele - je to vaše, jakmile je stáhnuto.
Porozumění rychlostem
Mediánový výsledek je kolem 150.5 tokenů za sekundu 809 z nich
Každá váha se účastní každého tokenu zde, takže šířka pásma je celá historie: hodnocení níže je ve skutečnosti hodnocením propustnosti paměti.
Bez rozložení pozornosti v záznamu je sloupec paměti přibližný. Je dost blízko na to, aby se podle něj vybralo hardware, a je nejméně spolehlivý při dlouhém kontextu.
Co bylo zapotřebí k jeho vybudování
Produkce toho vyžadovala aritmetiku v celkové výši přibližně 4.6 × 10²⁰ FLOP. Tato částka měří, kolik stál výroba modelu, a nemá žádný vliv na to, jak rychle odpovídá.
Trénink spotřeboval korpus kolem 327,978,752 tokeny textu
Jeho kritérium zahrnutí: highly cited,SOTA improvement.
Krok za krokem
Jak vybrat GPU pro Masked Autoencoders ViT-H
Stůl výše již posoudil každou kartu, pro kterou máme specifikace, proti tomuto modelu. Dostání se k vaší odpovědi trvá šest kroků.
-
01
Přečtěte si nejprve číslo paměti
Začněte od toho, co skutečně potřebuje, což je požadavek na Masked Autoencoders ViT-H, potřebující kolem 1.4 GB při kompresi Q8_0. Tato čísla, nikoli hlavní výkon karty, rozhodují o tom, zda běží.
-
02
Rozhodněte, jak dlouho vaše konverzace běží
Nastavte kontext na to, co skutečně použijete. Cache roste s konverzací a to je obvyklý důvod, proč karta, která se zdála v pořádku, přestane vejít. Masked Autoencoders ViT-H.
-
03
Vyberte, jak moc to budete komprimovat.
Každá KARTA spouští nejméně komprimovanou kopii, kterou může udržet., dosahující komprese Q8_0 na nejmenší kartě, která se vejde. Nastavení minimální kvality odstraňuje karty, které pouze splňují tuto kvalitu tím, že ji dále stlačují více, než byste chtěli, a udržuje srovnání na jedné úrovni.
-
04
Hodnoťte podle propustnosti spíše než podle specifikace
Seřaďte podle rychlosti, abyste viděli, jak si karty vedou. Masked Autoencoders ViT-H. Nebude to odpovídat hernímu pořádku, protože generace je omezena šířkou pásma paměti. Grafická karta, která vede seznam, je B200, na 5,361 tok/s
-
05
Zkontrolujte verdikt o vhodnosti před koupí
Tight fit běží, ale nenechává nic navíc pro delší konverzaci, v případě Masked Autoencoders ViT-H. Pohodlný znamená, že můžete později zvětšit kontext. Ten rozdíl má větší význam než pár tokenů za sekundu, takže kupte pro pohodlné, pokud to očekáváte.
-
06
Podívejte se, co dalšího ta karta spouští
Každý název karty odkazuje na její vlastní stránku, která provádí stejný výpočet v celém katalogu modelů. Karta se obvykle kupuje pro více než jeden model, takže se vyplatí se podívat před tím, než koupíte. Masked Autoencoders ViT-H.
Odpovědi
Masked Autoencoders ViT-H — běžné otázky
Masked Autoencoders ViT-H— kde si to mohu stáhnout?
Váhy jsou zveřejněny, i když nemáme odkaz na repozitář. Tato stránka vypočítává hardwarové požadavky spíše než aby hostila modelové soubory.
Masked Autoencoders ViT-H— kolik výpočetního výkonu bylo použito k jeho trénování?
Trénink spotřeboval kolem 4.6 × 10²⁰ FLOP. To měří, co stálo výrobu modelu, a neříká nic o tom, jak rychle odpovídá po natrénování — rychlost inferencí závisí na šířce pásma paměti, nikoli na rozpočtu na trénink.
Masked Autoencoders ViT-H— Mohu to spustit, pokud se to nevejde do mé GPU?
Může být rozdělen mezi GPU kartu a systémovou paměť, ale v tomto případě se generuje bolestivě pomalu. Každá postava zde předpokládá, že celý model je umístěn na kartě.
Masked Autoencoders ViT-H— Běhalo by to rychleji na dvou GPU?
Dvě karty koupit paměť spíše než rychlost, což záleží pouze pokud jedna karta to nemůže udržet. Číslo, které může: 818. Takže druhá karta je tu zřídka odpovědí.
Masked Autoencoders ViT-H— proč se kvantizace liší mezi kartami?
Každá KARTA je zobrazena, jak běží nejméně komprimovaná kopie, kterou může udržet. Počet různých úrovní komprese napříč KARTAMI, které ji vejít: 1. Větší karty získávají přesnější verzi a kvalita podlahy nad piny srovnává na jednu úroveň.
Masked Autoencoders ViT-H— Jak přesné jsou tyto odhady rychlosti?
Každé číslo je odvozeno od šířky pásma VRAM a velikosti modelu, není benchmarkováno, což je důvod, proč je každé publikováno jako rozsah spíše než jako jediné číslo. Jeden příklad: 3,217–8,578 tok/s na B200. Stejný model a karta se liší o třicet až padesát procent v závislosti na softwaru pro inferenci a jeho verzi.
Masked Autoencoders ViT-H— Jakou GPU potřebuji k jejímu spuštění?
Nejmenší karta v našem katalogu, která to udrží, je Tesla C1080, s kapacitou VRAM 4 GB. Spouští model při kompresi Q8_0 používající přibližně 1.4 GB, a produkuje přibližně 58.3 tokeny za sekundu. Celkový počet karet, které mohou model běžet: 818.
Masked Autoencoders ViT-H— jak rychle je to na GPU?
Záleží na kartě. Nejrychleji, jak to spočítáme, je B200, přibližně 5,361 tokenů za sekundu; nejpomalejší, který stále běží, zvládá výrazně méně. Rychlost čtení je kolem deseti tokenů za sekundu, a počet karet, které to zvládají: 809.
Masked Autoencoders ViT-H— kolik VRAM potřebuje?
Potřebuje asi 1.4 GB při kompresi Q8_0, která je ta nejmenší karta, která to používá. Méně komprese vyžaduje více: čísla ve sloupci paměti výše jsou přepočítána pro každou kartu, protože každá drží nejméně komprimovanou verzi, kterou může.
Masked Autoencoders ViT-H— mohu to spustit na GPU držící 8 GB?
Ano. GPU kartu CMP 170HX 8 GB, držení 8 GB, provozuje ho při kompresi Q8_0, používající přibližně 1.4 GB a generováním zhruba 999 tokenů za sekundu. Fit je pohodlný.
Masked Autoencoders ViT-H— mohu to spustit na GPU držící 12 GB?
Ano. GPU kartu GeForce RTX 3080 Ti, držení 12 GB, provozuje ho při kompresi Q8_0, používající přibližně 1.4 GB a generováním zhruba 611 tokenů za sekundu. Fit je pohodlný.
Masked Autoencoders ViT-H— mohu to spustit na GPU držící 16 GB?
Ano. GPU kartu Tesla V100 SXM2 16 GB, držení 16 GB, provozuje ho při kompresi Q8_0, používající přibližně 1.4 GB a generováním zhruba 757 tokenů za sekundu. Fit je pohodlný.
Masked Autoencoders ViT-H— mohu to spustit na GPU držící 24 GB?
Ano. GPU kartu GeForce RTX 5090 D V2, držení 24 GB, provozuje ho při kompresi Q8_0, používající přibližně 1.4 GB a generováním zhruba 898 tokenů za sekundu. Fit je pohodlný.
Masked Autoencoders ViT-H— Je to OPEN SOURCE?
Jeho váhy jsou zveřejněny, takže si je lze stáhnout a spustit na vlastním hardwaru. Všimněte si, že open WEIGHTS není totéž co open SOURCE v plném smyslu — neříká nic o tréninkových datech, tréninkovém kódu nebo obchodních podmínkách připojených.
Masked Autoencoders ViT-H— kolik má parametrů?
Má počet parametrů 632M. Three models: ViT-B (86M), ViT-L (304M), ViT-H (632M). Tato cifra je celková a rozhoduje o tom, kolik VRAM model potřebuje — přibližně půl gigabajtu na miliardu při kompresi, kterou většina lidí používá.
Masked Autoencoders ViT-H— Kdo to vytvořil?
Bylo to publikováno společností Facebook AI Research, zakládající se na United States of America, organizace zařazená jako industry.
Masked Autoencoders ViT-H— Kdy byl vydán?
Bylo to zveřejněno v November 2021. Schopnost na parametr se od té doby výrazně zlepšila, takže novější model stejné velikosti je často lepším využitím stejného hardwaru.
Masked Autoencoders ViT-H— K čemu se to používá?
funguje v oblasti Vision, a je zaznamenáno jako zpracovávající úkol semantic segmentation, Image classification, Image generation. Modely často obsahují více než jeden z každého a štítky popisují účel spíše než omezení schopností.
Druhý směr
Díváte se na to z druhé strany?
Tato stránka začíná od modelu. Pokud již vlastníte kartu a chcete vědět všechno, co bude spuštěno, začněte raději od hardwaru.