QMoE: compressed SwitchTransformer TPS-Rechner

Offene Gewichte Institute of Science and Technology Austria (ISTA),Neural Magic 1.6T Parameter October 2023

Jede Karte unten wird anhand dieses Modells bei der von Ihnen gewählten Kontextlänge und Mindestqualität bewertet. Geschwindigkeit ist eine Schätzung für eine einzelne Anfrage, berechnet aus der Speicherbandbreite der Karte und der Größe des Modells, sobald es komprimiert ist..

Für dieses Modell berechnet

0 Karten, die es ausführen können

818 Karten, für die wir Spezifikationen haben

Welche GPUs können laufen QMoE: compressed SwitchTransformer?

Setze die Eingaben, lies die Antwort

Ein längeres Gespräch benötigt mehr MEMORY, was dieses Modell von kleineren CARDS drängen kann..

Blendet Karten aus, die nur durch Komprimierung unter diesen Punkt in das Modell passen würden..

0 Karten passen

Berechnung
Braucht Quantisierung Passend

Keine Karte in unserem Katalog kann dieses Modell mit diesen Einstellungen ausführen..

Die Geschwindigkeiten sind Schätzungen für eine einzelne Anfrage — ein Gespräch zur Zeit — berechnet aus BANDWIDTH, MODELLGRÖSSE und QUANTISIERUNG. Der tatsächliche Durchsatz variiert mit der INFERENZLAUFZEIT und ihrer Version. Zahlen, die von Hardwareanbietern veröffentlicht wurden, messen viele gleichzeitige Anfragen und sind viel höher..

Aufgezeichnet

Volle Spezifikation

Alles, was in unserer Datenbank für dieses Modell aufgezeichnet ist. Der Großteil beschreibt, wie es trainiert wurde, anstatt wie es läuft — nützlicher Kontext zur Beurteilung, wie viel Arbeit darin steckt und wie es sich mit Modellen vergleicht, die in einem anderen Maßstab erstellt wurden..

Ursprung

Wer hat dieses Modell gebaut, wo und wann es veröffentlicht wurde.

Organisation
Institute of Science and Technology Austria (ISTA),Neural Magic
Organisationsart
Academia,Industry
Land
Austria, United States of America
Veröffentlicht
25 October 2023
Autoren
Elias Frantar, Dan Alistarh

Was es tut

Die Problemfelder, für die das Modell entwickelt wurde. Ein Modell kann mehrere davon tragen.

Domain
Language
Aufgabe
Language modeling
Basis-Modell
Switch

Größe

Wie groß das Modell ist und wie viele Daten damit trainiert wurden. Parameter sind die Zahl, die entscheidet, ob es auf einer bestimmten GPU-Karte passt.

Parameter
1.6T

"Concretely, QMoE can compress the 1.6 trillion parameter SwitchTransformer-c2048 model to less than 160GB" Same parameter count as base model. This paper compresses the model; there is no learning from data.

Trainingsdaten
576,000,000,000 tokens

In this paper, the authors compress the SwitchTransformer-c2048 model. There is no training dataset used.

Training-Compute

Die Berechnung, die durchgeführt wird, um das Modell zu trainieren, gemessen in Gleitpunktoperationen. Es ist ein Maß dafür, was der Trainingslauf gekostet hat, nicht dafür, wie schnell das fertige Modell Ihnen antwortet.

Feinabstimmung Rechenleistung
1 × 10¹⁸ FLOP

(1) * (38.71 * 10 ** 12) * (0.3) * (24 * 3600) = 1003363200000000000 (num gpu) * (peak flop) * (assumed utilization rate) * (time in seconds) from the paper: "This allows us to apply data-dependent compression to massive MoEs, while preserving the key feature of post-training compression techniques: the ability to perform effective compression using only modest computational resources, e.g., a single NVIDIA A6000 GPU and less than one day of compute." A6000 have 38.71 TFLOPs from https://www.tec…

Der Trainingslauf

Was es physisch gekostet hat, um zu trainieren: welche Chips, wie viele, wie lange und was das aus der Wand gezogen hat.

Trainingshardware
NVIDIA RTX A6000

Verfügbarkeit

Ob Sie das Modell beziehen und es auf Ihrer eigenen Hardware ausführen können, bestimmt, ob eine der Grafikkarten-Zahlen auf dieser Seite zutrifft.

Gewichte
Open — downloadable
Modellzugang
Open weights (unrestricted)
Training-Code
Open source

apache 2.0 github.com/IST-DASLab/qmoe

Wie es klassifiziert ist

Labels, die das Quell-Datenset anwendet, wenn bemerkenswerte Modelle verfolgt werden, und wie zuversichtlich es in den Eintrag ist.

Aufzeichnungsgenauigkeit
Confident
Zitationen
47

Quellen

Woher dieser Datensatz stammt und wann er zuletzt überprüft wurde.

Referenz
QMoE: Practical Sub-1-Bit Compression of Trillion-Parameter Models
Zuletzt aktualisiert
25 May 2026

Was die Zahlen bedeuten

Die Hardware-Seite

QMoE: compressed SwitchTransformer erreicht eine Parameteranzahl von 1.6T. Das übersteigt, was eine einzelne GPU-Karte hält. Es auszuführen bedeutet, entweder auf mehrere Karten aufzuteilen oder Hardware zu mieten, die für die Aufgabe gebaut ist, und jede Karte, die es alleine halten kann, ist ein Datacenter-Teil. Die Anzahl, die es kann: 0.

Hintergrund

QMoE: compressed SwitchTransformer wurde veröffentlicht von Institute of Science and Technology Austria (ISTA),Neural Magic, im Land aufgezeichnet als Austria, während October 2023. Die Kategorie, in die der Herausgeber fällt, ist academia,Industry.

Es funktioniert im Bereich von Language, und wird als die Aufgabe von aufgezeichnet language modeling.

Anstatt von Grund auf neu trainiert zu werden, ist es abgeleitet von Switch. Die meisten Modelle in diesem Bereich sind von einer bestehenden Basis abgeleitet, anstatt aus dem Nichts erstellt zu werden.

Die Gewichte sind veröffentlicht, sodass sie auf deiner eigenen Hardware unbegrenzt, offline und ohne angehängtes Konto heruntergeladen und ausgeführt werden kann.

Was in den Aufbau geflossen ist

Es wurde auf einem Korpus von etwa 576,000,000,000 Text-Tokens

Schritt für Schritt

Wie wählt man eine GPU für QMoE: compressed SwitchTransformer

Die obige Tabelle hat bereits jede Karte, für die wir Spezifikationen haben, mit diesem Modell verglichen. Um zu Ihrer Antwort zu gelangen, sind sechs Schritte erforderlich..

  1. 01

    Lese zuerst die MEMORY-Zahl

    Die Tabelle listet jede Karte auf, die in der Lage ist, zu halten QMoE: compressed SwitchTransformer. Kein Maß an Rechenleistung kompensiert eine Karte, die es nicht halten kann.

  2. 02

    Entscheide, wie lange deine Gespräche laufen

    Das Gespräch belegt ebenfalls Speicher und wächst, während es fortschreitet. Stellen Sie den Regler auf die Länge ein, die Sie erwarten, denn bei langem CONTEXT kann eine KARTE, die kurze Fragen mühelos verarbeitet, entfernt werden. QMoE: compressed SwitchTransformer.

  3. 03

    Setze eine Qualitätsuntergrenze

    Jede Karte läuft die am wenigsten komprimierte Kopie, die sie halten kann.. Das Festlegen einer Mindestqualität fallen die Karten weg, die es nur schaffen, indem sie weiter gedrückt werden, als man möchte, und hält den Vergleich auf einem Niveau.

  4. 04

    Nach Geschwindigkeit sortieren

    Die Geschwindigkeitsreihenfolge ist effektiv eine Reihenfolge nach Speicherbandbreite, für QMoE: compressed SwitchTransformer. Es wird nicht mit einer Gaming-Bestellung übereinstimmen, da die Generation durch MEMORY-BANDWIDTH gebunden ist.

  5. 05

    Überprüfen Sie das Passurteil, bevor Sie kaufen.

    Tight bedeutet, dass es lädt und ohne Spielraum funktioniert, um den Kontext später zu erhöhen, im Fall von QMoE: compressed SwitchTransformer. Komfortabel bedeutet, dass Sie den Kontext später erweitern können. Dieser Unterschied zählt mehr als ein paar Token pro Sekunde, also kaufen Sie für komfortabel, wenn Sie damit rechnen.

  6. 06

    Sieh, was diese Karte noch ausführen kann.

    Das Folgen einer Karte zu ihrer eigenen Seite zeigt jedes andere Modell, das sie halten kann, was die Frage ist, die folgt, sobald Sie sich festgelegt haben. QMoE: compressed SwitchTransformer.

Antworten

QMoE: compressed SwitchTransformer — Häufige Fragen

01

QMoE: compressed SwitchTransformer— Wofür wird es verwendet?

Es funktioniert im Bereich von Language, und wird als Bewältigung der Aufgabe von language modeling. Dies sind die Bereiche, um die es entworfen wurde; sie beschreiben die Absicht und nicht eine harte Grenze.

02

QMoE: compressed SwitchTransformer— Wo kann ich es herunterladen?

Die Gewichte sind veröffentlicht, obwohl wir keinen Repository-Link dafür haben. Diese Seite berechnet die Hardware-Anforderungen, anstatt Modell-Dateien zu hosten.

03

QMoE: compressed SwitchTransformer— Kann ich es ausführen, wenn es nicht in meine GPU passt?

Es kann zwischen der GPU-Karte und dem Systemspeicher aufgeteilt werden, aber es wird auf diese Weise schmerzhaft langsam erzeugt. Die nächste verpasste Berechnung bleibt hinter 691.9 GB Jede Zahl hier geht davon aus, dass das gesamte Modell auf der Karte vorhanden ist.

04

QMoE: compressed SwitchTransformer— Würden zwei GPUs es schneller ausführen?

Zwei Karten kaufen Speicher statt Geschwindigkeit, was nur wichtig ist, wenn eine Karte es nicht halten kann. Die Anzahl, die es kann: 0. So eine zweite Karte ist hier selten die Antwort.

05

QMoE: compressed SwitchTransformer— Warum unterscheidet sich die Quantisierung zwischen Karten?

Eine größere Karte hält eine genauere Kopie. Die Anzahl der verwendeten Komprimierungsstufen über die Karten, die es ausführen: 1. Größere Karten erhalten die genauere Version, und die Qualitätsuntergrenze verankert den Vergleich auf einem Niveau.

06

QMoE: compressed SwitchTransformer— Wie genau sind diese Geschwindigkeitsabschätzungen?

Jede Zahl leitet sich von VRAM-Bandbreite und Modellgröße ab, nicht benchmarked, weshalb jede als Bereich und nicht als einzelne Zahl veröffentlicht wird. Ein Beispiel: der Bereich unter jeder Zahl. Das gleiche Modell und die Karte variieren je nach Inferenzsoftware und deren Version um dreißig bis fünfzig Prozent.

07

QMoE: compressed SwitchTransformer— Ist es Open-Source?

Die Gewichte sind veröffentlicht, sodass sie heruntergeladen und auf Ihrer eigenen Hardware ausgeführt werden können. Beachten Sie, dass OPEN WEIGHTS nicht dasselbe wie OPEN SOURCE im vollen Sinne ist — es sagt nichts über die Trainingsdaten, den Trainingscode oder die damit verbundenen kommerziellen Bedingungen aus.

08

QMoE: compressed SwitchTransformer— Wie viele Parameter hat es?

Es hat eine Parameteranzahl von 1.6T. "Concretely, QMoE can compress the 1.6 trillion parameter SwitchTransformer-c2048 model to less than 160GB" Same parameter count as base model. This paper compresses the model; there is no learning from data. Diese Zahl ist die Gesamtsumme, und sie bestimmt, wie viel MEMORY das MODEL benötigt – ungefähr ein halbes Gigabyte pro Milliarde bei der Kompression, die die meisten Menschen verwenden.

09

QMoE: compressed SwitchTransformer— Wer hat es erstellt?

Es wurde veröffentlicht von Institute of Science and Technology Austria (ISTA),Neural Magic, basiert auf Austria, eine als kategorisierte Organisation academia,Industry.

10

QMoE: compressed SwitchTransformer— Wann wurde es veröffentlicht?

Es wurde veröffentlicht in October 2023. Die Fähigkeit pro Parameter hat sich erheblich verbessert, sodass ein neueres Modell derselben Größe oft die bessere Nutzung derselben Hardware darstellt.

Quelle

Originalveröffentlichung

Letzte Aktualisierung des Protokolls 25 May 2026

Die andere Richtung

Von der anderen Seite aus betrachten?

Diese Seite beginnt mit dem Modell. Wenn Sie bereits eine Karte besitzen und alles wissen möchten, was sie ausführen wird, Starte stattdessen von der Hardware.