gpt-oss-20b kalkulator TPS
Każda karta poniżej jest oceniana w stosunku do tego modelu przy wybranej długości kontekstu i minimalnej jakości. Prędkość jest oszacowaniem dla pojedynczego żądania, obliczonym na podstawie przepustowości pamięci karty i rozmiaru modelu po skompresowaniu..
Obliczone dla tego modelu
818 Karty, które posiadamy specyfikacje dla
Najmniejsza karta, która pasuje
Xeon Phi 7120P
16 GB · Q4_K_M · 10.7 tok/s
Najszybsza karta
B200
162 tok/s · 180 GB
Które GPU mogą uruchomić gpt-oss-20b?
Ustaw wejścia, odczytaj odpowiedź.
Dłuższa rozmowa wymaga więcej MEMORY, co może spowodować, że ten model nie zmieści się na mniejszych CARD..
Ukrywa karty, które zmieściłyby się w modelu tylko przez skompresowanie go poniżej tego punktu..
241 karty pasują
Obliczanie| potrzeby | Kwantyzacja | Pasuje | |||||
|---|---|---|---|---|---|---|---|
|
162
tok/s
97–259 · niska pewność |
B200 NVIDIA | 180 GB | 8,000 GB/s | Jan 2024 | 23.1 GB | Q8_0 | Wygodny |
|
162
tok/s
97–259 · niska pewność |
B300 NVIDIA | 288 GB | 8,000 GB/s | Sep 2025 | 23.1 GB | Q8_0 | Wygodny |
|
129
tok/s
78–207 · niska pewność |
Radeon Instinct MI350X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 23.1 GB | Q8_0 | Wygodny |
|
129
tok/s
78–207 · niska pewność |
Radeon Instinct MI355X AMD | 288 GB | 8,190 GB/s | Jan 2025 | 23.1 GB | Q8_0 | Wygodny |
|
103
tok/s
62–166 · niska pewność |
Radeon Instinct MI300 AMD | 128 GB | 6,550 GB/s | Jan 2023 | 23.1 GB | Q8_0 | Wygodny |
|
99.1
tok/s
59–158 · niska pewność |
H200 NVL NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 23.1 GB | Q8_0 | Wygodny |
|
99.1
tok/s
59–158 · niska pewność |
H200 SXM 141 GB NVIDIA | 141 GB | 4,890 GB/s | Nov 2024 | 23.1 GB | Q8_0 | Wygodny |
|
94.8
tok/s
57–152 · niska pewność |
Radeon Instinct MI325X AMD | 256 GB | 6,000 GB/s | Oct 2024 | 23.1 GB | Q8_0 | Wygodny |
|
84.1
tok/s
50–135 · niska pewność |
Radeon Instinct MI300A AMD | 128 GB | 5,325 GB/s | Dec 2023 | 23.1 GB | Q8_0 | Wygodny |
|
84.1
tok/s
50–135 · niska pewność |
Radeon Instinct MI300X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 23.1 GB | Q8_0 | Wygodny |
|
84.1
tok/s
50–135 · niska pewność |
Radeon Instinct MI308X AMD | 192 GB | 5,325 GB/s | Dec 2023 | 23.1 GB | Q8_0 | Wygodny |
|
79.8
tok/s
48–128 · niska pewność |
H100 NVL 94 GB NVIDIA | 94 GB | 3,940 GB/s | Mar 2023 | 23.1 GB | Q8_0 | Wygodny |
|
68.1
tok/s
41–109 · niska pewność |
H100 PCIe 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 23.1 GB | Q8_0 | Wygodny |
|
68.1
tok/s
41–109 · niska pewność |
H100 SXM5 80 GB NVIDIA | 80 GB | 3,360 GB/s | Oct 2022 | 23.1 GB | Q8_0 | Wygodny |
|
68.1
tok/s
41–109 · niska pewność |
H100 SXM5 94 GB NVIDIA | 94 GB | 3,360 GB/s | Mar 2023 | 23.1 GB | Q8_0 | Wygodny |
|
68.1
tok/s
41–109 · niska pewność |
H100 SXM5 96 GB NVIDIA | 96 GB | 3,360 GB/s | Mar 2023 | 23.1 GB | Q8_0 | Wygodny |
|
68.1
tok/s
41–109 · niska pewność |
H800 SXM5 NVIDIA | 80 GB | 3,360 GB/s | Mar 2023 | 23.1 GB | Q8_0 | Wygodny |
|
52.8
tok/s
32–85 · niska pewność |
Tesla V100 SXM2 16 GB NVIDIA | 16 GB | 1,130 GB/s | Nov 2019 | 13.3 GB | Q4_K_M | Wąski |
|
51.8
tok/s
31–83 · niska pewność |
Radeon Instinct MI250 AMD | 128 GB | 3,280 GB/s | Nov 2021 | 23.1 GB | Q8_0 | Wygodny |
|
51.8
tok/s
31–83 · niska pewność |
Radeon Instinct MI250X AMD | 128 GB | 3,280 GB/s | Nov 2021 | 23.1 GB | Q8_0 | Wygodny |
|
44.9
tok/s
27–72 · niska pewność |
GeForce RTX 5080 NVIDIA | 16 GB | 960 GB/s | Jan 2025 | 13.3 GB | Q4_K_M | Wąski |
|
43.2
tok/s
26–69 · niska pewność |
Data Center GPU Max 1550 Intel | 128 GB | 3,280 GB/s | Jan 2023 | 23.1 GB | Q8_0 | Wygodny |
|
42.3
tok/s
25–68 · niska pewność |
Data Center GPU Max Subsystem Intel | 128 GB | 3,210 GB/s | Jan 2023 | 23.1 GB | Q8_0 | Wygodny |
|
41.9
tok/s
25–67 · niska pewność |
Tesla V100 DGXS 16 GB NVIDIA | 16 GB | 897 GB/s | Mar 2018 | 13.3 GB | Q4_K_M | Wąski |
|
41.9
tok/s
25–67 · niska pewność |
Tesla V100 PCIe 16 GB NVIDIA | 16 GB | 897 GB/s | Jun 2017 | 13.3 GB | Q4_K_M | Wąski |
Prędkości są szacunkami dla pojedynczego zapytania — jednej konwersacji na raz — obliczonymi na podstawie przepustowości pamięci, rozmiaru MODELu i kwantyzacji. Rzeczywista przepustowość różni się w zależności od czasu uruchamiania inference i jego wersji. Wartości publikowane przez dostawców sprzętu mierzą wiele jednoczesnych zapytań i są znacznie wyższe..
Na nagranie
Pełna specyfikacja
Wszystko na rekord dla tego modelu. Większość z tego opisuje, jak był trenowany, a nie jak działa — użyteczny kontekst do oceny, ile pracy włożono w to, i jak wypada w porównaniu z modelami budowanymi w innym skali..
Pochodzenie
Kto zbudował ten model, gdzie i kiedy został opublikowany.
- Organizacja
- OpenAI
- Typ organizacji
- Industry
- Kraj
- United States of America
- Opublikowany
- 5 August 2025
Co to robi
Obszary problemowe, dla których stworzono model. Model może mieć kilka z każdego.
- Domena
- Language
- Zadanie
- Language modeling/generation, Question answering
Rozmiar
Jak duży jest model i na ile danych był trenowany. Parametry to liczba, która decyduje, czy mieści się na danej karcie graficznej.
- parametry
- 20.9B
- Dane treningowe
- tokens
Total parameters: 20.91B
(pretraining FLOPs)/(6*3.6B active parameters)
Obliczenia treningowe
Arytmetyka wykonywana w celu wytrenowania modelu, mierzona w operacjach zmiennoprzecinkowych. Jest to miara kosztów przeprowadzenia treningu, a nie tego, jak szybko gotowy model odpowiada na twoje pytania.
- Obliczenia treningowe
- 5.5 × 10²³ FLOP
- Jak to zostało ustalone
- Hardware
"The training run for gpt-oss-120b required 2.1 million H100-hours to complete, with gpt-oss-20b needing almost 10x fewer" assuming "almost 10x fewer" means ~9x fewer: 4.94e24/9 = 5.49e23
Przebieg szkolenia
Co fizycznie było potrzebne do treningu: jakie chipy, ile, na jak długo i co to pobierało z sieci.
- Sprzęt do trenowania
- NVIDIA H100 SXM5 80GB
Dostępność
Czy możesz zdobyć model i uruchomić go na swoim sprzęcie, co decyduje o tym, czy którakolwiek z cyfr karty graficznej na tej stronie ma zastosowanie.
- Wagi
- Open — downloadable
- Dostęp do modelu
- Open weights (unrestricted)
Jak jest klasyfikowane
Etykiety, które źródłowy zbiór danych stosuje podczas śledzenia znaczących modeli oraz jak pewny jest tego wpisu.
- Prawdopodobnie powyżej 10²³ FLOP
- Yes
- Dlaczego to jest śledzone
- Discretionary
- Zapisz pewność
- Confident
Źródła
Skąd pochodzi ten rekord i kiedy był ostatnio sprawdzany.
- Referencja
- gpt-oss-120b & gpt-oss-20b Model Card
- Ostatnio zaktualizowane
- 10 February 2026
Ekstremy
Dziesięć najszybszych GPU, które uruchamiają gpt-oss-20b
Uszeregowany według szacowanej liczby tokenów na sekundę, najnowsza karta na pierwszym miejscu, gdy prędkości są równe. Ponieważ generacja jest ograniczona przez pamięć, to uporządkowanie podąża za przepustowością, a nie za jakimkolwiek benchmarkiem gier..
- 01 B300 288 GB · 8,000 GB/s · Q8_0 162 tok/s
- 02 B200 180 GB · 8,000 GB/s · Q8_0 162 tok/s
- 03 Radeon Instinct MI350X 288 GB · 8,190 GB/s · Q8_0 129 tok/s
- 04 Radeon Instinct MI355X 288 GB · 8,190 GB/s · Q8_0 129 tok/s
- 05 Radeon Instinct MI300 128 GB · 6,550 GB/s · Q8_0 103 tok/s
- 06 H200 NVL 141 GB · 4,890 GB/s · Q8_0 99.1 tok/s
- 07 H200 SXM 141 GB 141 GB · 4,890 GB/s · Q8_0 99.1 tok/s
- 08 Radeon Instinct MI325X 256 GB · 6,000 GB/s · Q8_0 94.8 tok/s
- 09 Radeon Instinct MI300A 128 GB · 5,325 GB/s · Q8_0 84.1 tok/s
- 10 Radeon Instinct MI300X 192 GB · 5,325 GB/s · Q8_0 84.1 tok/s
Najmniejsze GPU, które nadal działają gpt-oss-20b
Najtańsza droga do, według pojemności pamięci. Tight fit uruchamia model, ale nie zostawia nic na dłuższą rozmowę..
- 01 Ryzen AI Z2 Extreme GPU 16 GB · potrzeby 13.3 GB · Q4_K_M · Wąski 9.3 tok/s
- 02 Radeon RX 7700 16 GB · potrzeby 13.3 GB · Q4_K_M · Wąski 22.7 tok/s
- 03 Arc Pro B50 16 GB · potrzeby 13.3 GB · Q4_K_M · Wąski 6.8 tok/s
- 04 RTX PRO 2000 Blackwell 16 GB · potrzeby 13.3 GB · Q4_K_M · Wąski 13.5 tok/s
- 05 Ryzen Z2 Extreme GPU 16 GB · potrzeby 13.3 GB · Q4_K_M · Wąski 4.7 tok/s
- 06 Radeon RX 9060 XT 16 GB 16 GB · potrzeby 13.3 GB · Q4_K_M · Wąski 11.8 tok/s
- 07 GeForce RTX 5060 Ti 16 GB 16 GB · potrzeby 13.3 GB · Q4_K_M · Wąski 21.0 tok/s
- 08 GeForce RTX 5080 Mobile 16 GB · potrzeby 13.3 GB · Q4_K_M · Wąski 41.9 tok/s
- 09 Radeon RX 9070 16 GB · potrzeby 13.3 GB · Q4_K_M · Wąski 23.5 tok/s
- 10 Radeon RX 9070 XT 16 GB · potrzeby 13.3 GB · Q4_K_M · Wąski 23.5 tok/s
Co oznaczają liczby
Co potrzebujesz, aby go uruchomić
Minimalna karta
Xeon Phi 7120P
Pamięć potrzebna
13.3 GB
Najszybszy
162 tok/s
gpt-oss-20b osiąga liczbę parametrów równą 20.9B. To ląduje w zakresie, który może obsłużyć poważna karta stacjonarna, gdy wagi są skompresowane. Liczba kart, które śledzimy, które mogą to uruchomić: 241.
Najmniejszy sprzęt, który działa, to Xeon Phi 7120P, o pojemności pamięci 16 GB, uruchomienie go przy kompresji Q4_K_M i produkując około 10.7 tokeny na sekundę
Najszybciej, jak to obliczamy, to B200, generowanie w przybliżeniu 162 tokenów na sekundę na podstawie przepustowości pamięci 8,000 GB/s.
Skąd to pochodzi
gpt-oss-20b został opublikowany przez OpenAI, w kraju zapisanym jako United States of America, podczas August 2025. Organizacja publikująca jest klasyfikowana jako industry.
Działa w dziedzinie Language, i jest zapisany jako wykonujący zadanie language modeling/generation, Question answering.
Wagi są publikowane, więc można je pobrać i uruchomić na własnym sprzęcie bezterminowo, offline, bez przypisanego konta.
Zrozumienie prędkości
Mediana wyniku wynosi około 21.0 tokenów na sekundę. Przekraczając prędkość czytania bezpośrednio: 198 ich
Będąc gęstym, odczytuje każdą swoją część po tokenie, dlatego poniższe uporządkowanie według szybkości tak ściśle pokrywa się z uporządkowaniem według przepustowości pamięci.
Jej architektura wewnętrzna nie jest w naszej bazie danych, więc pamięć jest szacowana na podstawie liczby parametrów i odpowiednio oznaczona. Spodziewaj się, że rzeczywista wartość będzie się różnić, tym bardziej przy długim context length.
Co poszło w budowę tego
Trenowanie zajęło budżet obliczeniowy wynoszący około 5.5 × 10²³ FLOP, na sprzęcie zarejestrowanym jako NVIDIA H100 SXM5 80GB. Ta liczba mierzy, ile kosztowało wyprodukowanie modelu i nie ma wpływu na to, jak szybko odpowiada.
Kryterium włączenia: discretionary.
Krok po kroku
Jak wybrać GPU do gpt-oss-20b
Tabela powyżej oceniła już każdą kartę, dla której posiadamy specyfikacje, w stosunku do tego modelu. Dotarcie do odpowiedzi wymaga sześciu kroków..
-
01
Zacznij od kolumny pamięci
Każda karta tutaj została sprawdzona pod kątem gpt-oss-20b, potrzebując około 13.3 GB przy kompresji Q4_K_M. To ta liczba, a nie nagłówkowa wydajność karty, decyduje o tym, czy można ją uruchomić.
-
02
Dopasuj kontekst do swojego rzeczywistego użycia
Dłuższe rozmowy kosztują pamięć oprócz tego, co potrzebują wagi. Przesuń suwak do swojej rzeczywistej długości roboczej przed zaufaniem jakiejkolwiek linii dla gpt-oss-20b.
-
03
Zdecyduj, ile kompresji zaakceptujesz
Każda KARTA uruchamia najmniej skompresowaną kopię, jaką może pomieścić., osiągnięcie kompresji Q4_K_M na najmniejszej karcie, która się mieści. Ustalenie minimalnej jakości odrzuca karty, które tylko ją osiągają, uciskając bardziej niż byś chciał, i utrzymuje porównanie na jednym poziomie.
-
04
Porównaj TOKENS na sekundę, a nie SPECYFIKACJE.
Ranking według tokenów na sekundę podąża za przepustowością pamięci, a nie liczbą rdzeni, dla gpt-oss-20b. Nie dopasuje się do zamówienia gier, ponieważ generacja jest ograniczona przez przepustowość pamięci. Karta na szczycie listy to B200, w 162 tok/s
-
05
Zwróć uwagę na margines, a nie tylko na dopasowanie
Tight oznacza, że ładowanie i działanie odbywa się bez miejsca na późniejsze zwiększenie długości kontekstu, w przypadku gpt-oss-20b. Wygodne oznacza, że możesz później zwiększyć kontekst. Ta różnica ma większe znaczenie niż kilka tokenów na sekundę, więc kupuj za wygodne, jeśli tego oczekujesz.
-
06
Zobacz, co jeszcze ta karta uruchamia
Każda strona karty powtarza tę procedurę dla każdego modelu, który posiadamy, odpowiadając, do czego jeszcze sprzęt jest przydatny poza gpt-oss-20b.
Odpowiedzi
gpt-oss-20b — częste pytania
gpt-oss-20b— ile ma parametrów?
Ma liczbę parametrów równą 20.9B. Total parameters: 20.91B. Ta liczba to całkowita, i to ona decyduje o tym, ile pamięci potrzebuje model — mniej więcej pół gigabajta na miliard przy kompresji, którą używa większość ludzi.
gpt-oss-20b— kto to stworzył?
Zostało opublikowane przez OpenAI, oparty na United States of America, organizacja sklasyfikowana jako industry.
gpt-oss-20b— kiedy to zostało wydane?
Zostało opublikowane w August 2025.
gpt-oss-20b— do czego to służy?
Działa w dziedzinie Language, i jest zarejestrowany jako realizujący zadanie language modeling/generation, Question answering. To są obszary, wokół których został zaprojektowany; opisują zamiar, a nie twardą granicę.
gpt-oss-20b— Gdzie mogę to pobrać?
Wagi są opublikowane, chociaż nie posiadamy linku do repozytorium. Ta strona oblicza wymagania sprzętowe, a nie hostuje pliki modelu.
gpt-oss-20b— ile mocy obliczeniowej użyto do jego trenowania?
Szkolenie zajęło około 5.5 × 10²³ FLOP, na sprzęcie zarejestrowanym jako NVIDIA H100 SXM5 80GB. To mierzy, ile kosztowało wyprodukowanie modelu i nie mówi nic o tym, jak szybko odpowiada po wytrenowaniu — prędkość wnioskowania pochodzi z SZEROKOŚCI PASMA, a nie z budżetu treningowego.
gpt-oss-20b— czy mogę go uruchomić, jeśli nie mieści się w moim GPU?
Można go podzielić między kartą a pamięcią systemową, ale w ten sposób generuje się boleśnie powoli. Najbliższy brak, który obliczamy, jest za mały o 2.5 GB Każda figura tutaj zakłada, że cały model jest zainstalowany na karcie.
gpt-oss-20b— czy dwa GPU uruchomią to szybciej?
Druga KARTA mniej więcej podwaja dostępna PAMIĘĆ, ale nie tempo generacji. Liczba już zdolna do uruchomienia jej samodzielnie: 241. Więc druga karta rzadko jest odpowiedzią tutaj.
gpt-oss-20b— dlaczego kwantyzacja różni się między kartami?
Każda KARTA jest przedstawiana z uruchomioną najmniej skompresowaną wersją, jaką może pomieścić. Liczba odmiennych poziomów kompresji w KARTACH, które mogą go pomieścić: 4. Większe karty otrzymują dokładniejszą wersję, a minimalna jakość powyżej ustala porównanie na jednym poziomie.
gpt-oss-20b— Jak dokładne są te szacunki prędkości?
Są obliczane na podstawie specyfikacji, a nie mierzone, i każdy ma zakres. Jeden przykład: 97–259 tok/s na B200. Ten sam model i karta różnią się o trzydzieści do pięćdziesięciu procent w zależności od oprogramowania inferencyjnego i jego wersji.
gpt-oss-20b— Jaką GPU potrzebuję, aby ją uruchomić?
Najmniejsza karta w naszym katalogu, która to pomieści, to Xeon Phi 7120P, o pojemności pamięci 16 GB. Uruchamia model przy kompresji Q4_K_M używając około 13.3 GB, i produkuje w przybliżeniu 10.7 tokenów na sekundę. Liczba kart, które mogą go uruchomić łącznie: 241.
gpt-oss-20b— jak szybko działa na GPU?
To zależy od karty. Najszybciej obliczamy to B200, około 162 tokenów na sekundę; najwolniejszy, który nadal działa, osiąga znacznie mniej. Prędkość odczytu wynosi około dziesięciu tokenów na sekundę, a liczba kart, które to osiągają: 198.
gpt-oss-20b— Ile VRAM-u potrzebuje?
Potrzebuje około 13.3 GB przy kompresji Q4_K_M, który jest najmniejszą kartą, która to uruchamia. Mniej kompresji potrzebuje więcej: liczby w kolumnie pamięci powyżej są przeliczane dla każdej karty, ponieważ każda z nich trzyma wersję o najmniejszej kompresji, jaką może.
gpt-oss-20b— czy mogę uruchomić to na GPU trzymając 16 GB?
Tak. Karta Tesla V100 SXM2 16 GB, trzymanie 16 GB, uruchamia go przy kompresji Q4_K_M, używając około 13.3 GB i generując w przybliżeniu 52.8 tokenów na sekundę. Dopasowanie jest ciasne.
gpt-oss-20b— czy mogę uruchomić to na GPU trzymając 24 GB?
Tak. Karta GeForce RTX 5090 D V2, trzymanie 24 GB, uruchamia go przy kompresji Q6_K, używając około 18.2 GB i generując w przybliżeniu 39.4 tokenów na sekundę. Dopasowanie jest ciasne.
gpt-oss-20b— czy jest open weight?
Jego wagi są opublikowane, więc można je pobrać i uruchomić na własnym sprzęcie. Zauważ, że OPEN WEIGHTS nie są tym samym co OPEN SOURCE w pełnym sensie — nie mówi nic o danych treningowych, kodzie treningowym, ani warunkach komercyjnych.
Druga strona
Patrząc na to z drugiej strony?
Ta strona zaczyna się od modelu. Jeśli już posiadasz kartę i chcesz wiedzieć, co wszystko będzie działać., Zacznij od sprzętu zamiast.