Command A Vision TPS kalkulátor
Minden kártyát az alábbiak szerint értékelünk e modell alapján a választott kontextus hossza és minimális minőség szerint. A sebesség egy becslés egyetlen kérésre, amelyet a kártya memória sávszélessége és a modell mérete alapján számítunk ki, miután tömörítettük..
Kiszámítva ehhez a MODElhez
818 kártyák, amelyek specifikációs adataink vannak
Legkisebb kártya, ami elfér
Radeon Instinct MI200
64 GB · Q3_K_M · 13.1 tok/s
Leggyorsabb kártya
B200
30.3 tok/s · 180 GB
Melyik GPU képes futtatni Command A Vision?
Állítsa be a bemeneteket, olvassa el a választ
Egy hosszabb beszélgetés több memóriaigényt támaszt, ami kiszoríthatja ezt a modellt a kisebb kártyákról..
Elrejti azokat a GPU-kártyákat, amelyek csak a modellbe illeszkednének a compressziójuk ezen pont alá..
43 kártyák illeszkednek
Számítás| Szükséges | Kvantisálás | Illeszkedik | |||||
|---|---|---|---|---|---|---|---|
|
30.3
tok/s
18–48 · alacsony bizalom |
B200 NVIDIA | 180 GB | 8,000 GB/s | Jan 2024 | 120.6 GB | Q8_0 | Kényelmes |
|
30.3
tok/s
18–48 · alacsony bizalom |
B300 NVIDIA | 288 GB | 8,000 GB/s | Sep 2025 | 120.6 GB | Q8_0 | Kényelmes |
|
29.3
tok/s
18–47 · alacsony bizalom |
H100 SXM5 80 GB NVIDIA | 80 GB | 3,360 GB/s | Oct 2022 | 68.5 GB | Q4_K_M | Szoros |
|
29.3
tok/s
18–47 · alacsony bizalom |
H800 SXM5 NVIDIA | 80 GB | 3,360 GB/s | Mar 2023 | 68.5 GB | Q4_K_M | Szoros |
|
28.1
tok/s
17–45 · alacsony bizalom |
Radeon Instinct MI300 AMD | 128 GB | 6,550 GB/s | Jan 2023 | 94.5 GB | Q6_K | Kényelmes |
|
26.6
tok/s
16–43 · alacsony bizalom |
H100 NVL 94 GB NVIDIA | 94 GB | 3,940 GB/s | Mar 2023 | 81.5 GB | Q5_K_M | Szoros |
|
24.2
tok/s
14–39 · alacsony bizalom |
Radeon Instinct MI350X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 120.6 GB | Q8_0 | Kényelmes |
|
24.2
tok/s
14–39 · alacsony bizalom |
Radeon Instinct MI355X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 120.6 GB | Q8_0 | Kényelmes |
|
22.8
tok/s
14–37 · alacsony bizalom |
Radeon Instinct MI300A AMD | 128 GB | 5,325 GB/s | Dec 2023 | 94.5 GB | Q6_K | Kényelmes |
|
22.7
tok/s
14–36 · alacsony bizalom |
H100 PCIe 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 81.5 GB | Q5_K_M | Szoros |
|
22.7
tok/s
14–36 · alacsony bizalom |
H100 SXM5 94 GB NVIDIA | 94 GB | 3,360 GB/s | Mar 2023 | 81.5 GB | Q5_K_M | Szoros |
|
22.7
tok/s
14–36 · alacsony bizalom |
H100 SXM5 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 81.5 GB | Q5_K_M | Szoros |
|
20.6
tok/s
12–33 · alacsony bizalom |
H100 SXM5 64 GB NVIDIA | 64 GB | 2,020 GB/s | Mar 2023 | 55.4 GB | Q3_K_M | Szoros |
|
18.5
tok/s
11–30 · alacsony bizalom |
H200 NVL NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 120.6 GB | Q8_0 | Szoros |
|
18.5
tok/s
11–30 · alacsony bizalom |
H200 SXM 141 GB NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 120.6 GB | Q8_0 | Szoros |
|
17.8
tok/s
11–29 · alacsony bizalom |
A100 SXM4 80 GB NVIDIA | 80 GB | 2,040 GB/s | Nov 2020 | 68.5 GB | Q4_K_M | Szoros |
|
17.8
tok/s
11–29 · alacsony bizalom |
A100X NVIDIA | 80 GB | 2,040 GB/s | Jun 2021 | 68.5 GB | Q4_K_M | Szoros |
|
17.8
tok/s
11–29 · alacsony bizalom |
A800 SXM4 80 GB NVIDIA | 80 GB | 2,040 GB/s | Aug 2022 | 68.5 GB | Q4_K_M | Szoros |
|
17.8
tok/s
11–29 · alacsony bizalom |
H100 CNX NVIDIA | 80 GB | 2,040 GB/s | Mar 2023 | 68.5 GB | Q4_K_M | Szoros |
|
17.8
tok/s
11–29 · alacsony bizalom |
H100 PCIe 80 GB NVIDIA | 80 GB | 2,040 GB/s | Oct 2022 | 68.5 GB | Q4_K_M | Szoros |
|
17.8
tok/s
11–29 · alacsony bizalom |
H800 PCIe 80 GB NVIDIA | 80 GB | 2,040 GB/s | Mar 2023 | 68.5 GB | Q4_K_M | Szoros |
|
17.7
tok/s
11–28 · alacsony bizalom |
Radeon Instinct MI325X AMD | 256 GB | 6,000 GB/s | Oct 2024 | 120.6 GB | Q8_0 | Kényelmes |
|
16.9
tok/s
10–27 · alacsony bizalom |
A100 PCIe 80 GB NVIDIA | 80 GB | 1,940 GB/s | Jun 2021 | 68.5 GB | Q4_K_M | Szoros |
|
16.9
tok/s
10–27 · alacsony bizalom |
A800 PCIe 80 GB NVIDIA | 80 GB | 1,940 GB/s | Nov 2022 | 68.5 GB | Q4_K_M | Szoros |
|
15.7
tok/s
9–25 · alacsony bizalom |
Radeon Instinct MI300X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 120.6 GB | Q8_0 | Kényelmes |
A sebességek egyetlen kérésre - egy beszélgetés egy időben - vonatkozó becslések, amelyeket a MEMORY BANDWIDTH, a MODEL SIZE és a QUANTISATION alapján számítanak ki. A valós áteresztőképesség változik az INFERENCE RUNTIME és annak verziója szerint. A HARDWARE VENDORS által közzétett számok sok párhuzamos kérést mérnek, és sokkal magasabbak..
Nyilvántartásban
Teljes specifikáció
Minden feljegyzett ezzel a modellel kapcsolatban. A legtöbbje azt írja le, hogyan képezték ki, nem pedig azt, hogyan fut — hasznos kontextus annak megítéléséhez, hogy mennyi munka ment bele, és hogyan viszonyul a más méretben épített modellekhez..
Eredet
Ki építette ezt a modellt, hol, és mikor publikálták.
- Szervezet
- Cohere
- Szervezet típusa
- Industry
- Ország
- Canada
- Közölt
- 31 July 2025
Mit csinál
A probléma területek, amelyekre a modell készült. Egy modell több mindegyikből hordozhat.
- Tartomány
- Vision, Multimodal, Language
- Feladat
- Visual question answering, Character recognition (OCR), Language modeling/generation, Question answering
- Alapmodell
- Cohere Command A,SigLIP 2
Méret
Mekkora a modell, és mennyi adatot használtak a betanításához. A paraméterek azok a számok, amelyek eldöntik, hogy az adott grafikus kártyára illeszkedik-e.
- Paraméterek
- 112B
- Képzési adatok
- tokens
112B This is a vision-language model that uses a language model based on Command A paired with the SigLIP2-patch16-512 vision encoder through a multimodal adapter for vision-language understanding.
Elérhetőség
Hogy meg tudja-e szerezni a modellt és futtatni a saját hardverén, ez dönt arról, hogy alkalmazhatóak-e a lap ezen oldalán feltüntetett grafikus kártya adatok.
- Súlyok
- Open — downloadable
- Modell hozzáférés
- Open weights (non-commercial)
- Képzés kód
- Unreleased
- Hugging Face
- CohereLabs
cc-by-nc-4.0 https://huggingface.co/CohereLabs/command-a-vision-07-2025
Hogyan van besorolva
Címkék a forráshalmazra, amelyeket a figyelemre méltó modellek nyomon követésekor alkalmaznak, és hogy mennyire biztos az adatbevitelben.
- Nyilvántartási bizalom
- Confident
Források
Honnan származik ez a felvétel és mikor ellenőrizték utoljára.
- Referencia
- Introducing Command A Vision: Multimodal AI built for business
- Utoljára frissítve
- 28 November 2025
Az extremitások
A tíz leggyorsabb GPU, amely képes futtatni Command A Vision
A másodpercenkénti becsült tokenek alapján rangsorolva, a legújabb kártyát először, ahol a sebességek azonosak. Mivel a generálás a MEMÓRIA SZÉLESSÉGÉhez van kötve, ez a sorrend a sávszélességet követi, nem pedig bármilyen játékbeli tesztet..
- 01 B300 288 GB · 8,000 GB/s · Q8_0 30.3 tok/s
- 02 B200 180 GB · 8,000 GB/s · Q8_0 30.3 tok/s
- 03 H800 SXM5 80 GB · 3,360 GB/s · Q4_K_M 29.3 tok/s
- 04 H100 SXM5 80 GB 80 GB · 3,360 GB/s · Q4_K_M 29.3 tok/s
- 05 Radeon Instinct MI300 128 GB · 6,550 GB/s · Q6_K 28.1 tok/s
- 06 H100 NVL 94 GB 94 GB · 3,940 GB/s · Q5_K_M 26.6 tok/s
- 07 Radeon Instinct MI350X 288 GB · 8,190 GB/s · Q8_0 24.2 tok/s
- 08 Radeon Instinct MI355X 288 GB · 8,190 GB/s · Q8_0 24.2 tok/s
- 09 Radeon Instinct MI300A 128 GB · 5,325 GB/s · Q6_K 22.8 tok/s
- 10 H100 PCIe 96 GB 96 GB · 3,360 GB/s · Q5_K_M 22.7 tok/s
A legkisebb GPU-k, amik még futnak Command A Vision
A legolcsóbb út, a memória kapacitás alapján. Egy szoros illeszkedés futtatja a modellt, de semmit sem hagy a hosszabb beszélgetésre..
- 01 Jetson T4000 64 GB · Szükséges 55.4 GB · Q3_K_M · Szoros 2.8 tok/s
- 02 H100 SXM5 64 GB 64 GB · Szükséges 55.4 GB · Q3_K_M · Szoros 20.6 tok/s
- 03 Jetson AGX Orin 64 GB 64 GB · Szükséges 55.4 GB · Q3_K_M · Szoros 2.1 tok/s
- 04 Radeon Instinct MI200 64 GB · Szükséges 55.4 GB · Q3_K_M · Szoros 13.1 tok/s
- 05 Radeon Instinct MI210 64 GB · Szükséges 55.4 GB · Q3_K_M · Szoros 13.1 tok/s
- 06 RTX PRO 5000 72 GB Blackwell 72 GB · Szükséges 61.9 GB · IQ4_XS · Szoros 12.4 tok/s
- 07 H100 CNX 80 GB · Szükséges 68.5 GB · Q4_K_M · Szoros 17.8 tok/s
- 08 H800 PCIe 80 GB 80 GB · Szükséges 68.5 GB · Q4_K_M · Szoros 17.8 tok/s
- 09 H800 SXM5 80 GB · Szükséges 68.5 GB · Q4_K_M · Szoros 29.3 tok/s
- 10 A800 PCIe 80 GB 80 GB · Szükséges 68.5 GB · Q4_K_M · Szoros 16.9 tok/s
Mit jelentenek a számok
Mi szükséges ehhez a modellhez való futtatáshoz
Minimális kártya
Radeon Instinct MI200
Szükséges memória
55.4 GB
Leggyorsabb
30.3 tok/s
Command A Vision eléri a paraméterek számát 112B. Ez a fogyasztói hardveren felül helyezi, abba a tartományba, ahol egy kártyát ezért a célért vásárolnak, nem pedig átalakítanak erre. Az általunk nyomon követett kártyák száma, amelyek elférnek benne: 43.
A legkisebb kártya, ami elbírja, az Radeon Instinct MI200, memória kapacitással rendelkezik 64 GB, futtatás egy tömörítési arányon Q3_K_M és körülbelül előállítva 13.1 tokenek másodpercenként
A legjobb kategóriájú B200, nagyjából generálás 30.3 másodpercenkénti tokenek egy memória sávszélesség erejében 8,000 GB/s.
Honnan jött
Command A Vision ki lett adva által Cohere, az országban rögzítve mint Canada, alatt July 2025. Egy olyan szervezetből származik, amelyet kategorizálnak mint industry.
Működik a területen a Vision, Multimodal, Language, és úgy van rögzítve, mint a feladat végrehajtása visual question answering, Character recognition (OCR), Language modeling/generation, Question answering.
Ahelyett, hogy nulláról lenne betanítva, az származik Cohere Command A,SigLIP 2. Ezért osztja a bázismodell általános formáját és méretét.
A közzétett súlyok azt jelentik, hogy a modell a te gépeden fut, nem pedig valaki másén, ami lehetővé teszi az alábbi hardverkérdés megválaszolását. A Hugging Face-en az alábbi szervezet alatt van publikálva CohereLabs.
A sebességek megértése
A kártyák felének, amelyek tartják, több mint 17.7 másodpercenkénti tokenek 39 tőlük
Ez egy sűrű modell, így minden paramétert minden előállított tokenhez elolvasnak. Ez szinte pontosan nyomon követi a memória-sávszélességet — egy kártya, amelynek kétszer akkora a sávszélessége, körülbelül kétszer olyan gyorsan generál.
Nélkül az attention elrendezés a nyilvántartásban, a memory oszlop egy közelítés. Elég közel van ahhoz, hogy hardver kiválasztását lehessen végezni, és a leghitványosabb hosszú context esetén.
Lépésről lépésre
Hogyan válasszunk GPU-t a Command A Vision
A fenti táblázat már értékelte az összes kártyát, amelynek specifikációi elérhetők ennek a modellen. A válaszod megszerzése hat lépést igényel..
-
01
Kezdj a GPU VRAM oszloptól.
Minden kártyát itt leellenőriztünk a következőkkel szemben Command A Vision, körülbelül szükséges 55.4 GB a tömörítésnél Q3_K_M. Ez a szám, nem a kártya címválaszték teljesítménye, az, ami eldönti, hogy fut-e.
-
02
Állítsa be a használt CONTEXT LENGTH-et.
Állítsa be a kontextust arra, amit valójában használni fog. A cache a beszélgetéssel nő, és ez a szokásos oka annak, hogy egy kártya, amelynek korábban rendben kellett volna lennie, egyszer csak nem fér el. Command A Vision.
-
03
Válaszd ki, milyen messzire fogod tömöríteni.
A kvantálási oszlop kártyánként változik, mert egy nagyobb kártya pontosabb másolatot tartalmaz., elérni egy tömörítést a Q3_K_M a legkisebb kártyán, ami elfér. A minimális minőség beállítása eldobja azokat a kártyákat, amelyek csak úgy tudják kezelni, hogy tovább szorítanak, mint amit szeretnél, és egy szinten tartja az összehasonlítást.
-
04
Hasonlítsd össze a TOKENS PER SECOND-t, ne a SPECIFICATIONS-t.
Rendezze sebesség szerint, hogy lássa, hogyan rangsorolnak a kártyák. Command A Vision. Nem fog illeszkedni egy gaming rendeléshez, mert a generálás a memória sávszélesség által kötött. A listát vezető KÁRTYA B200, at 30.3 tok/s
-
05
Olvasd el az illeszkedés oszlopot utoljára.
Egy szűk elhelyezés fut, de nem hagy semmit egy hosszabb beszélgetésre, az esetében Command A Vision. A Kényelmes azt jelenti, hogy később bővítheted a contextet. Ez a különbség fontosabb, mint néhány token másodpercenként, így kényelmeset vásárolj, ha ezt várod.
-
06
Nézd meg, mit futtat még az a kártya.
Minden kártyaoldal megismétli ezt a vizsgálatot minden modellre, amelyet birtoklunk, válaszolva arra, hogy mi másra jó a hardver, azon kívül, hogy Command A Vision.
Válaszok
Command A Vision — gyakori kérdések
Command A Vision— Mikor adták ki?
Kibocsátották a July 2025.
Command A Vision— Mire használják?
Működik a területen a Vision, Multimodal, Language, és rögzítve van, hogy kezeli a feladatot visual question answering, Character recognition (OCR), Language modeling/generation, Question answering. A modellek gyakran több mint egyet hordoznak mindegyikből, és a címkék a célra, nem pedig a képességek határaira utalnak.
Command A Vision— Hol tudom letölteni?
Súlyait a Hugging Face-en tette közzé, a szervezet alatt CohereLabs. Nem tárolunk modell fájlokat — ez az oldal kiszámolja, hogy milyen hardver szükséges a futtatásukhoz.
Command A Vision— Futtathatom, ha nem fér el a GPU-mban?
Részben. Azok a rétegek, amelyek nem férnek el a GPU VRAM-ban, a rendszer memóriájában ülnek és a sebesség egy töredékén futnak, így egy túlnyomórészt áthelyezett AI model használata ritkán éri meg. A legközelebbi hiba, amit számítunk, alulmúlja 25.3 GB Minden ábra azt feltételezi, hogy az egész model a kártyán tartózkodik.
Command A Vision— Futtatna-e két GPU gyorsabban?
Egy második Kártya körülbelül megduplázza a rendelkezésre álló MEMÓRIÁT, de nem a generálási sebességet. A szám, amely már képes egyedül futtatni: 43. Tehát egy második KÁRTYA ritkán a megoldás itt.
Command A Vision— miért különbözik a kvantálás a kártyák között?
Mivel a kapacitás változik, úgy az is, hogy mennyire kell összenyomni. A fenti táblázatban lévő különböző szintek száma: 6. A nagyobb kártyák a pontosabb verziót kapják, és a minőségi küszöb felett a összehasonlítást egy szinten rögzíti.
Command A Vision— Mennyire pontosak ezek a sebességbecslések?
Ezek becslések valós hibahatárokkal, és bármelyikük ésszerűen bárhol elhelyezkedhet a közzétett tartományán belül, attól függően, hogy milyen futtatási időt használsz. A leggyorsabb eredmény itt: 18–48 tok/s a fájlban B200. Ugyanaz a modell és kártya harminc és ötven százalék között változik a következtetési szoftvertől és annak verziójától függően.
Command A Vision— Milyen GPU-ra van szükségem, hogy futtathassam?
A katalógusunk legkisebb kártyája, ami ezt tartja, az Radeon Instinct MI200, memória kapacitással rendelkezik 64 GB. A modell egy tömörítéssel fut. Q3_K_M használva körülbelül 55.4 GB, és körülbelül 13.1 másodpercenkénti tokenek. A kártyák összes száma, amelyek képesek futtatni. 43.
Command A Vision— mennyi idő alatt fut a GPU-n?
A kártyától függ. A leggyorsabb, amit számolunk, az B200, körülbelül 30.3 tokenek másodpercenként; a leglassabb, ami még fut, jelentősen kevesebbet képes kezelni. Az olvasási sebesség körülbelül tíz token másodpercenként, és a kártyák száma, amelyek ezt meg tudják tisztítani: 39.
Command A Vision— mennyi VRAM-ra van szüksége?
Kb. 55.4 GB tömörítési arányban Q3_K_M, melyik az a legkisebb KÁRTYA, amelyik futtatni tudja. Kevesebb tömörítés több szükséges: a fentebbi memória oszlop számai minden KÁRTYÁRA újraszámításra kerülnek, mert mindegyik tartalmazza a legkevésbé tömörített verziót, amit csak tud.
Command A Vision— Nyílt forráskódú?
Súlyai közzétételre kerültek, így letölthető és futtatható a saját hardvereden. Ne feledd, hogy az open weight nem azonos az open source teljes értelmében — nem mond semmit a tanulási adatokkal, a tanulási kóddal vagy a kereskedelmi feltételekkel kapcsolatban.
Command A Vision— Hány paramétere van?
Paraméterszáma 112B. 112B This is a vision-language model that uses a language model based on Command A paired with the SigLIP2-patch16-512 vision encoder through a multimodal adapter for vision-language understanding. Ez a szám a teljes összeg, és ez határozza meg, hogy mennyi VRAM-ra van szüksége a modelleknek — körülbelül fél gigabájt milliárdonként a legtöbb ember által használt tömörítési módban.
Command A Vision— Ki készítette ezt?
Kiadta Cohere, alapján Canada, egy szervezet, amelyet kategorizáltak mint industry.
A másik irány
Másik oldalról nézve?
Ez az oldal a modellel kezdődik. Ha már van kártyád, és szeretnéd tudni, hogy mindent futtat-e, Kezdj a hardverből..