Gemma 4 31B IT TPS kalkulátor
Minden kártyát az alábbiak szerint értékelünk e modell alapján a választott kontextus hossza és minimális minőség szerint. A sebesség egy becslés egyetlen kérésre, amelyet a kártya memória sávszélessége és a modell mérete alapján számítunk ki, miután tömörítettük..
Kiszámítva ehhez a MODElhez
818 kártyák, amelyek specifikációs adataink vannak
Legkisebb kártya, ami elfér
RTX A4500
20 GB · IQ4_XS · 21.5 tok/s
Leggyorsabb kártya
B200
109 tok/s · 180 GB
Melyik GPU képes futtatni Gemma 4 31B IT?
Állítsa be a bemeneteket, olvassa el a választ
Egy hosszabb beszélgetés több memóriaigényt támaszt, ami kiszoríthatja ezt a modellt a kisebb kártyákról..
Elrejti azokat a GPU-kártyákat, amelyek csak a modellbe illeszkednének a compressziójuk ezen pont alá..
132 kártyák illeszkednek
Számítás| Szükséges | Kvantisálás | Illeszkedik | |||||
|---|---|---|---|---|---|---|---|
|
109
tok/s
66–175 · alacsony bizalom |
B200 NVIDIA | 180 GB | 8,000 GB/s | Jan 2024 | 33.9 GB | Q8_0 | Kényelmes |
|
109
tok/s
66–175 · alacsony bizalom |
B300 NVIDIA | 288 GB | 8,000 GB/s | Sep 2025 | 33.9 GB | Q8_0 | Kényelmes |
|
87.3
tok/s
52–140 · alacsony bizalom |
Radeon Instinct MI350X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 33.9 GB | Q8_0 | Kényelmes |
|
87.3
tok/s
52–140 · alacsony bizalom |
Radeon Instinct MI355X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 33.9 GB | Q8_0 | Kényelmes |
|
69.8
tok/s
42–112 · alacsony bizalom |
Radeon Instinct MI300 AMD | 128 GB | 6,550 GB/s | Jan 2023 | 33.9 GB | Q8_0 | Kényelmes |
|
66.8
tok/s
40–107 · alacsony bizalom |
H200 NVL NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 33.9 GB | Q8_0 | Kényelmes |
|
66.8
tok/s
40–107 · alacsony bizalom |
H200 SXM 141 GB NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 33.9 GB | Q8_0 | Kényelmes |
|
63.9
tok/s
38–102 · alacsony bizalom |
Radeon Instinct MI325X AMD | 256 GB | 6,000 GB/s | Oct 2024 | 33.9 GB | Q8_0 | Kényelmes |
|
56.8
tok/s
34–91 · alacsony bizalom |
Radeon Instinct MI300A AMD | 128 GB | 5,325 GB/s | Dec 2023 | 33.9 GB | Q8_0 | Kényelmes |
|
56.8
tok/s
34–91 · alacsony bizalom |
Radeon Instinct MI300X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 33.9 GB | Q8_0 | Kényelmes |
|
56.8
tok/s
34–91 · alacsony bizalom |
Radeon Instinct MI308X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 33.9 GB | Q8_0 | Kényelmes |
|
53.8
tok/s
32–86 · alacsony bizalom |
H100 NVL 94 GB NVIDIA | 94 GB | 3,940 GB/s | Mar 2023 | 33.9 GB | Q8_0 | Kényelmes |
|
45.9
tok/s
28–73 · alacsony bizalom |
H100 PCIe 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 33.9 GB | Q8_0 | Kényelmes |
|
45.9
tok/s
28–73 · alacsony bizalom |
H100 SXM5 80 GB NVIDIA | 80 GB | 3,360 GB/s | Oct 2022 | 33.9 GB | Q8_0 | Kényelmes |
|
45.9
tok/s
28–73 · alacsony bizalom |
H100 SXM5 94 GB NVIDIA | 94 GB | 3,360 GB/s | Mar 2023 | 33.9 GB | Q8_0 | Kényelmes |
|
45.9
tok/s
28–73 · alacsony bizalom |
H100 SXM5 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 33.9 GB | Q8_0 | Kényelmes |
|
45.9
tok/s
28–73 · alacsony bizalom |
H800 SXM5 NVIDIA | 80 GB | 3,360 GB/s | Mar 2023 | 33.9 GB | Q8_0 | Kényelmes |
|
42.3
tok/s
25–68 · alacsony bizalom |
GeForce RTX 5090 D V2 NVIDIA | 24 GB | 1,340 GB/s | Aug 2025 | 19.5 GB | Q4_K_M | Szoros |
|
38.5
tok/s
23–62 · alacsony bizalom |
A30X NVIDIA | 24 GB | 1,220 GB/s | Apr 2021 | 19.5 GB | Q4_K_M | Szoros |
|
37.1
tok/s
22–59 · alacsony bizalom |
DRIVE A100 PROD NVIDIA | 32 GB | 1,870 GB/s | May 2020 | 26.7 GB | Q6_K | Szoros |
|
37.1
tok/s
22–59 · alacsony bizalom |
GRID A100A NVIDIA | 32 GB | 1,870 GB/s | May 2020 | 26.7 GB | Q6_K | Szoros |
|
35.5
tok/s
21–57 · alacsony bizalom |
GeForce RTX 5090 NVIDIA | 32 GB | 1,790 GB/s | Jan 2025 | 26.7 GB | Q6_K | Szoros |
|
35.5
tok/s
21–57 · alacsony bizalom |
GeForce RTX 5090 D NVIDIA | 32 GB | 1,790 GB/s | Jan 2025 | 26.7 GB | Q6_K | Szoros |
|
35.0
tok/s
21–56 · alacsony bizalom |
Radeon Instinct MI250 AMD | 128 GB | 3,280 GB/s | Nov 2021 | 33.9 GB | Q8_0 | Kényelmes |
|
35.0
tok/s
21–56 · alacsony bizalom |
Radeon Instinct MI250X AMD | 128 GB | 3,280 GB/s | Nov 2021 | 33.9 GB | Q8_0 | Kényelmes |
A sebességek egyetlen kérésre - egy beszélgetés egy időben - vonatkozó becslések, amelyeket a MEMORY BANDWIDTH, a MODEL SIZE és a QUANTISATION alapján számítanak ki. A valós áteresztőképesség változik az INFERENCE RUNTIME és annak verziója szerint. A HARDWARE VENDORS által közzétett számok sok párhuzamos kérést mérnek, és sokkal magasabbak..
Nyilvántartásban
Teljes specifikáció
Minden feljegyzett ezzel a modellel kapcsolatban. A legtöbbje azt írja le, hogyan képezték ki, nem pedig azt, hogyan fut — hasznos kontextus annak megítéléséhez, hogy mennyi munka ment bele, és hogyan viszonyul a más méretben épített modellekhez..
Eredet
Ki építette ezt a modellt, hol, és mikor publikálták.
- Szervezet
- Google DeepMind
- Szervezet típusa
- Industry
- Ország
- United States of America
- Közölt
- 2 April 2026
Mit csinál
A probléma területek, amelyekre a modell készült. Egy modell több mindegyikből hordozhat.
- Tartomány
- Language
- Feladat
- Language modeling/generation, Question answering
Méret
Mekkora a modell, és mennyi adatot használtak a betanításához. A paraméterek azok a számok, amelyek eldöntik, hogy az adott grafikus kártyára illeszkedik-e.
- Paraméterek
- 31B
- Képzési adatok
- tokens
Elérhetőség
Hogy meg tudja-e szerezni a modellt és futtatni a saját hardverén, ez dönt arról, hogy alkalmazhatóak-e a lap ezen oldalán feltüntetett grafikus kártya adatok.
- Súlyok
- Open — downloadable
- Modell hozzáférés
- Open weights (restricted use)
Hogyan van besorolva
Címkék a forráshalmazra, amelyeket a figyelemre méltó modellek nyomon követésekor alkalmaznak, és hogy mennyire biztos az adatbevitelben.
- Nyilvántartási bizalom
- Likely
Források
Honnan származik ez a felvétel és mikor ellenőrizték utoljára.
- Utoljára frissítve
- 8 April 2026
Az extremitások
A tíz leggyorsabb GPU, amely képes futtatni Gemma 4 31B IT
A másodpercenkénti becsült tokenek alapján rangsorolva, a legújabb kártyát először, ahol a sebességek azonosak. Mivel a generálás a MEMÓRIA SZÉLESSÉGÉhez van kötve, ez a sorrend a sávszélességet követi, nem pedig bármilyen játékbeli tesztet..
- 01 B300 288 GB · 8,000 GB/s · Q8_0 109 tok/s
- 02 B200 180 GB · 8,000 GB/s · Q8_0 109 tok/s
- 03 Radeon Instinct MI350X 288 GB · 8,190 GB/s · Q8_0 87.3 tok/s
- 04 Radeon Instinct MI355X 288 GB · 8,190 GB/s · Q8_0 87.3 tok/s
- 05 Radeon Instinct MI300 128 GB · 6,550 GB/s · Q8_0 69.8 tok/s
- 06 H200 NVL 141 GB · 4,890 GB/s · Q8_0 66.8 tok/s
- 07 H200 SXM 141 GB 141 GB · 4,890 GB/s · Q8_0 66.8 tok/s
- 08 Radeon Instinct MI325X 256 GB · 6,000 GB/s · Q8_0 63.9 tok/s
- 09 Radeon Instinct MI300A 128 GB · 5,325 GB/s · Q8_0 56.8 tok/s
- 10 Radeon Instinct MI300X 192 GB · 5,325 GB/s · Q8_0 56.8 tok/s
A legkisebb GPU-k, amik még futnak Gemma 4 31B IT
A legolcsóbb út, a memória kapacitás alapján. Egy szoros illeszkedés futtatja a modellt, de semmit sem hagy a hosszabb beszélgetésre..
- 01 RTX 4000 Ada Generation 20 GB · Szükséges 17.6 GB · IQ4_XS · Szoros 12.1 tok/s
- 02 RTX 4000 SFF Ada Generation 20 GB · Szükséges 17.6 GB · IQ4_XS · Szoros 9.4 tok/s
- 03 Radeon RX 7900 XT 20 GB · Szükséges 17.6 GB · IQ4_XS · Szoros 20.9 tok/s
- 04 A10M 20 GB · Szükséges 17.6 GB · IQ4_XS · Szoros 16.8 tok/s
- 05 GeForce RTX 3080 Ti 20 GB 20 GB · Szükséges 17.6 GB · IQ4_XS · Szoros 25.5 tok/s
- 06 RTX A4500 20 GB · Szükséges 17.6 GB · IQ4_XS · Szoros 21.5 tok/s
- 07 Arc Pro B60 24 GB · Szükséges 19.5 GB · Q4_K_M · Szoros 9.4 tok/s
- 08 GeForce RTX 5090 D V2 24 GB · Szükséges 19.5 GB · Q4_K_M · Szoros 42.3 tok/s
- 09 RTX PRO 4000 Blackwell SFF 24 GB · Szükséges 19.5 GB · Q4_K_M · Szoros 13.6 tok/s
- 10 GeForce RTX 5090 Mobile 24 GB · Szükséges 19.5 GB · Q4_K_M · Szoros 28.3 tok/s
Mit jelentenek a számok
Ami szükséges a futtatásához
Minimális kártya
RTX A4500
Szükséges memória
17.6 GB
Leggyorsabb
109 tok/s
Gemma 4 31B IT eléri a paraméterek számát 31B. Ez a tartományba esik, amelyet egy komoly asztali KÁRTYA kezelni tud, miután a súlyok tömörítve vannak. Azoknak a KÁRTYÁKNAK a száma, amelyeket nyomon követünk, és amelyek képesek futtatni: 132.
A legkevesebb hardver, ami működik, az RTX A4500, memória kapacitással rendelkezik 20 GB, futtatás egy tömörítési arányon IQ4_XS és körülbelül előállítva 21.5 tokenek másodpercenként
A legjobb kategóriájú B200, nagyjából generálás 109 másodpercenkénti tokenek egy memória sávszélesség erejében 8,000 GB/s.
Honnan jött
Gemma 4 31B IT ki lett adva által Google DeepMind, az országban rögzítve mint United States of America, alatt April 2026. A kiadó kategóriája alá tartozik industry.
Működik a területen a Language, és úgy van rögzítve, mint a feladat végrehajtása language modeling/generation, Question answering.
Mivel a súlyai ki lettek adva, semmi sem függ attól, hogy egy szolgáltató elérhető marad-e - a tiéd, amint letöltötted.
A sebességek megértése
A medián eredmény körül 21.3 másodpercenkénti tokenek 102 tőlük
Ez egy sűrű modell, így minden paramétert minden előállított tokenhez elolvasnak. Ez szinte pontosan nyomon követi a memória-sávszélességet — egy kártya, amelynek kétszer akkora a sávszélessége, körülbelül kétszer olyan gyorsan generál.
A belső architektúrája nincs nyilvántartásban, így a memória a paraméterek száma alapján van megbecsülve és ennek megfelelően van megjelölve. Várhatóan a tényleges érték eltér, különösen hosszú CONTEXT LENGTH esetén.
Lépésről lépésre
Hogyan válasszunk GPU-t a Gemma 4 31B IT
A fenti táblázat már értékelte az összes kártyát, amelynek specifikációi elérhetők ennek a modellen. A válaszod megszerzése hat lépést igényel..
-
01
Olvasd el a MEMORY adatokat először.
Kezdj a tényleges szükségletekből, ami a követelményének a Gemma 4 31B IT, körülbelül szükséges 17.6 GB a tömörítésnél IQ4_XS. A kapacitás a kapu — egy kártya vagy tartalmazza, vagy nem.
-
02
Állítsa be a használt CONTEXT LENGTH-et.
Állítsa be a kontextust arra, amit valójában használni fog. A cache a beszélgetéssel nő, és ez a szokásos oka annak, hogy egy kártya, amelynek korábban rendben kellett volna lennie, egyszer csak nem fér el. Gemma 4 31B IT.
-
03
Válaszd ki, milyen messzire fogod tömöríteni.
A kvantálási oszlop kártyánként változik, mert egy nagyobb kártya pontosabb másolatot tartalmaz., elérni egy tömörítést a IQ4_XS a legkisebb kártyán, ami elfér. A minimális minőség beállítása eldobja azokat a kártyákat, amelyek csak úgy tudják kezelni, hogy tovább szorítanak, mint amit szeretnél, és egy szinten tartja az összehasonlítást.
-
04
Rangsoroljon átbocsátás alapján, nem pedig specifikációs lap szerint.
A sebességsorrend lényegében egy sorrend a MEMÓRIA-SÁV szerint, a Gemma 4 31B IT. Nem fog illeszkedni egy gaming rendeléshez, mert a generálás a memória sávszélesség által kötött. A listát vezető KÁRTYA B200, at 109 tok/s
-
05
Nézd a mozgásteret, ne csak a passzolást.
Tömör jelentése, hogy betölti és működik, nincs hely a későbbi kontextus növelésére, a következő esetben Gemma 4 31B IT. A Kényelmes azt jelenti, hogy később bővítheted a contextet. Ez a különbség fontosabb, mint néhány token másodpercenként, így kényelmeset vásárolj, ha ezt várod.
-
06
Nyisd meg a kiválasztott kártyát.
Minden kártyaoldal megismétli ezt a vizsgálatot minden modellre, amelyet birtoklunk, válaszolva arra, hogy mi másra jó a hardver, azon kívül, hogy Gemma 4 31B IT.
Válaszok
Gemma 4 31B IT — gyakori kérdések
Gemma 4 31B IT— Futtatna-e két GPU gyorsabban?
Egy második Kártya körülbelül megduplázza a rendelkezésre álló MEMÓRIÁT, de nem a generálási sebességet. A szám, amely már képes egyedül futtatni: 132. Tehát egy második KÁRTYA ritkán a megoldás itt.
Gemma 4 31B IT— miért különbözik a kvantálás a kártyák között?
Minden kártya a lehető legkevésbé tömörített másolatát futtatva jelenik meg, amit képes tárolni. A kártyákon elférő különböző tömörítési szintek száma: 5. A nagyobb kártyák a pontosabb verziót kapják, és a minőségi küszöb felett a összehasonlítást egy szinten rögzíti.
Gemma 4 31B IT— Mennyire pontosak ezek a sebességbecslések?
A specifikációkból számítják ki őket, nem pedig mérik, és mindegyiknek van egy tartománya. Egy példa: 66–175 tok/s a fájlban B200. Ugyanaz a modell és kártya harminc és ötven százalék között változik a következtetési szoftvertől és annak verziójától függően.
Gemma 4 31B IT— Milyen GPU-ra van szükségem, hogy futtathassam?
A katalógusunk legkisebb kártyája, ami ezt tartja, az RTX A4500, memória kapacitással rendelkezik 20 GB. A modell egy tömörítéssel fut. IQ4_XS használva körülbelül 17.6 GB, és körülbelül 21.5 másodpercenkénti tokenek. A kártyák összes száma, amelyek képesek futtatni. 132.
Gemma 4 31B IT— mennyi idő alatt fut a GPU-n?
A kártyától függ. A leggyorsabb, amit számolunk, az B200, körülbelül 109 tokenek másodpercenként; a leglassabb, ami még fut, jelentősen kevesebbet képes kezelni. Az olvasási sebesség körülbelül tíz token másodpercenként, és a kártyák száma, amelyek ezt meg tudják tisztítani: 102.
Gemma 4 31B IT— mennyi VRAM-ra van szüksége?
Kb. 17.6 GB tömörítési arányban IQ4_XS, melyik az a legkisebb KÁRTYA, amelyik futtatni tudja. Kevesebb tömörítés több szükséges: a fentebbi memória oszlop számai minden KÁRTYÁRA újraszámításra kerülnek, mert mindegyik tartalmazza a legkevésbé tömörített verziót, amit csak tud.
Gemma 4 31B IT— futtathatom egy GPU-n tartva 24 GB?
Igen. A KÁRTYA GeForce RTX 5090 D V2, tartás 24 GB, futtatja egy tömörítési arány mellett Q4_K_M, használva körülbelül 19.5 GB és körülbelül generálás 42.3 tokensek másodpercenként. A fit szoros.
Gemma 4 31B IT— Nyílt forráskódú?
Súlyai közzétételre kerültek, így letölthető és futtatható a saját hardvereden. Ne feledd, hogy az open weight nem azonos az open source teljes értelmében — nem mond semmit a tanulási adatokkal, a tanulási kóddal vagy a kereskedelmi feltételekkel kapcsolatban.
Gemma 4 31B IT— Hány paramétere van?
Paraméterszáma 31B. Ez a szám a teljes összeg, és ez határozza meg, hogy mennyi VRAM-ra van szüksége a modelleknek — körülbelül fél gigabájt milliárdonként a legtöbb ember által használt tömörítési módban.
Gemma 4 31B IT— Ki készítette ezt?
Kiadta Google DeepMind, alapján United States of America, egy szervezet, amelyet kategorizáltak mint industry.
Gemma 4 31B IT— Mikor adták ki?
Kibocsátották a April 2026.
Gemma 4 31B IT— Mire használják?
Működik a területen a Language, és rögzítve van, hogy kezeli a feladatot language modeling/generation, Question answering. Ezek azok a területek, amelyek köré tervezték; ezek a szándékot írják le, nem pedig egy szigorú határt.
Gemma 4 31B IT— Hol tudom letölteni?
A súlyok közzététele megtörtént, bár nem rendelkezünk tárolólinkkel erre. Ez az oldal a hardverkövetelményeket számítja ki, nem pedig modellfájlokat tárol.
Gemma 4 31B IT— Futtathatom, ha nem fér el a GPU-mban?
Elosztható a kártya és a rendszer MEMÓRIA között, de így fájdalmasan lassan generálódik. A legközelebbi hiba, amit számítunk, alulmúlja 5.1 GB Minden ábra azt feltételezi, hogy az egész model a kártyán tartózkodik.
Forrás
Az utolsó frissítés időpontja 8 April 2026
A másik irány
Másik oldalról nézve?
Ez az oldal a modellel kezdődik. Ha már van kártyád, és szeretnéd tudni, hogy mindent futtat-e, Kezdj a hardverből..