HLBL

Gesloten gewichten University of Toronto 1.8M Parameters December 2008

Geen schatting

Geen hardwarevereisten voor dit model

De gewichten voor dit model zijn niet gepubliceerd, dus het kan niet worden gedownload of op uw eigen hardware worden uitgevoerd in welke omvang dan ook. Het is alleen toegankelijk via de provider, en geen grafische kaart verandert dat.

Op record

Volledige specificatie

Alles over dit model vastgelegd. Het meeste beschrijft hoe het getraind is in plaats van hoe het draait — nuttige context om te beoordelen hoeveel werk erin gestoken is en hoe het zich verhoudt tot modellen die op een andere schaal zijn gebouwd.

Oorsprong

Wie heeft dit model gebouwd, waar en wanneer het werd gepubliceerd.

Organisatie
University of Toronto
Organisatie type
Academia
Land
Canada
Gepubliceerd
8 December 2008
Auteurs
A. Mnih, Geoffrey E. Hinton

Wat het doet

De probleemgebieden waarvoor het model is gebouwd. Een model kan er verschillende van elk bevatten.

Domein
Language
Taak
Language modeling

Grootte

Hoe groot het model is en hoeveel data erop is getraind. Parameters zijn de cijfers die bepalen of het op een bepaalde grafische kaart past.

Parameters
1.8M

"Except for where stated otherwise, the models used for the experiments used 100 dimensional feature vectors and a context size of 5." "The vocabulary size for this dataset is 17964." Embedding: 17964 * 100 = 1796400 Context matrices: 5 * 100 * 100 = 50000 Unembedding: 0 (tied embedding “while the matrix of weights from the hidden layer to the output layer is simply the feature vector matrix R”) Total: 1796400 + 50000 = 1846400

Opleidingsgegevens
14,000,000 tokens

"The dataset consists of a 14 million word training set"

Hoe het is geclassificeerd

Labels de bron dataset toepast bij het volgen van opmerkelijke modellen, en hoe zeker het is van de invoer.

Waarom het wordt gevolgd
Highly cited
Vereiste vertrouwen
Confident

Bronnen

Waar deze record vandaan komt en wanneer het voor het laatst is gecontroleerd.

Referentie
A Scalable Hierarchical Distributed Language Model
Laatst bijgewerkt
28 November 2025

Wat de cijfers betekenen

Wat dit model is

HLBL was published by University of Toronto, in Canada, in December 2008. The organisation is categorised as academia.

It works in Language, and is recorded as doing language modeling.

Omdat de gewichten niet beschikbaar zijn, zijn geen van de hardwarecijfers elders op deze site op dit van toepassing.

Hoe het was getraind

It was trained on about 14,000,000 tokens of text.

The reason it appears in this catalogue at all is highly cited.

Antwoorden

HLBL — Veelgestelde vragen

01

What is HLBL used for?

HLBL works in Language, and is recorded as handling language modeling. Models frequently carry more than one of each, and the tags describe purpose rather than capability limits.

02

What GPU do I need to run HLBL?

None. HLBL is a closed model — its weights were never published, so it cannot be downloaded or run on your own hardware at any price. It is reachable only through its provider.

03

Is HLBL open source?

The licensing for HLBL was never recorded in our source data. We treat unstated licensing as closed, because an unrecorded licence is not one to rely on.

04

How many parameters does HLBL have?

HLBL has 1.8M parameters. "Except for where stated otherwise, the models used for the experiments used 100 dimensional feature vectors and a context size of 5." "The vocabulary size for this dataset is 17964." Embedding: 17964 * 100 = 1796400 Context matrices: 5 * 100 * 100 = 50000 Unembedding: 0 (tied embedding “while the matrix of weights from the hidden layer to the output layer is simply the feature vector matrix R”) Total: 1796400 + 50000 = 1846400. That figure is the total, and it is what decides how much memory the model needs — roughly half a gigabyte per billion at the compression most people use.

05

Who created HLBL?

HLBL was published by University of Toronto, based in Canada, categorised as academia.

06

When was HLBL released?

HLBL was published in December 2008. Capability per parameter has improved considerably since, so a newer model of the same size is often the better use of the same hardware.

Bron

Oorspronkelijke publicatie

Laast bijgewerkt 28 November 2025

De andere richting

Vanuit het andere perspectief bekijken?

Deze pagina begint bij het model. Als u al een kaart bezit en alles wilt weten wat het zal uitvoeren, Begin liever bij de hardware.