Unsupervised High-level Feature Learner

Poids fermés Google 1B paramètres July 2012

Aucune estimation

Aucune exigence matérielle pour ce modèle

Les poids de ce modèle n'ont pas été publiés, donc il ne peut pas être téléchargé ou exécuté sur votre propre matériel à aucune taille. Il n'est accessible que par l'intermédiaire de son fournisseur, et aucun changement de carte graphique ne modifie cela..

Enregistrement

Spécifications complètes

Tout est enregistré pour ce modèle. La plupart décrit comment il a été entraîné plutôt que comment il fonctionne — un contexte utile pour juger combien de travail a été investi, et comment il se compare avec des modèles construits à une échelle différente..

Origine

Qui a construit ce modèle, où, et quand il a été publié.

Organisation
Google
Type d'organisation
Industry
Pays
United States of America
Publié
12 July 2012
Auteurs
Quoc V. Le, Marc'Aurelio Ranzato, Rajat Monga, Matthieu Devin, Kai Chen, Greg S. Corrado, Jeff Dean, Andrew Y. Ng

Ce qu'il fait

Les domaines problématiques pour lesquels le modèle a été conçu. Un modèle peut contenir plusieurs de chacun.

Domaine
Vision
Tâche
Image classification
Approche
Unsupervised

Taille

Quelle est la taille du modèle et combien de données il a été formé. Les paramètres sont le chiffre qui décide s'il convient à une carte graphique donnée.

paramètres
1B

"To answer this, we train a 9-layered locally connected sparse autoencoder with pooling and local contrast normalization on a large dataset of images (the model has 1 billion connections, the dataset has 10 million 200x200 pixel images downloaded from the Internet)"

Données d'entraînement
1,200,000,000,000 tokens

10 million 200x200 images extracted from Youtube videos

Calcul de formation

L'arithmétique effectuée pour entraîner le modèle, mesurée en opérations en virgule flottante. C'est une mesure du coût de l'exécution de l'entraînement, pas de la rapidité avec laquelle le modèle fini vous répond.

Calcul de formation
6 × 10¹⁷ FLOP

Assuming 1 epoch, 10 million images and 1 billion parameters, 6*N*D = 6*10^17 FLOP

Comment cela a été établi
Operation counting

L'exécution de formation

Ce qu'il a physiquement fallu pour entraîner : quels chips, combien, pendant combien de temps, et ce que cela a tiré du secteur.

Temps en temps réel
72 hours

"We train this network using model parallelism and asynchronous SGD on a cluster with 1,000 machines (16,000 cores) for three days. "

Coût de calcul
$16

Comment il est classé

Étiquettes que le ensemble de données source applique lors du suivi de modèles notables, et à quel point il est confiant dans l'entrée.

Modèle Frontier
Yes
Pourquoi c'est suivi
Highly cited,SOTA improvement

"we trained our network to obtain 15.8% accuracy in recognizing 20,000 object categories from ImageNet, a leap of 70% relative improvement over the previous state-of-the-art"

Confiance d'enregistrement
Likely
Citations
2,909

Sources

D'où vient cet enregistrement et quand a-t-il été vérifié pour la dernière fois.

Référence
Building High-level Features Using Large Scale Unsupervised Learning
Dernière mise à jour
28 November 2025

Ce que les chiffres signifient

À propos de ce modèle

Unsupervised High-level Feature Learner a été publié par Google, dans le pays enregistré comme United States of America, durant July 2012. La catégorie à laquelle appartient l'éditeur est industry.

Il fonctionne dans le domaine de Vision, et est enregistré comme exécutant la tâche de image classification.

Parce que les poids ne sont pas disponibles, aucune des spécifications matérielles ailleurs sur ce site ne s'applique à cela.

Entraînement et provenance

L'entraînement a nécessité un budget de calcul d'environ 6 × 10¹⁷ FLOP. Ce chiffre mesure le coût de production du modèle, et n'a aucune incidence sur la vitesse de réponse.

L'ensemble d'entraînement a duré environ 1,200,000,000,000 jetons de texte

Son critère d'inclusion : highly cited,SOTA improvement.

Réponses

Unsupervised High-level Feature Learner — questions courantes

01

Unsupervised High-level Feature Learner— à quoi ça sert ?

Il fonctionne dans le domaine de Vision, et est enregistré comme gérant la tâche de image classification. Un modèle peut porter plusieurs de chacun, donc ce sont les domaines pour lesquels il a été conçu plutôt qu'une limite sur ce qu'il tentera.

02

Unsupervised High-level Feature Learner— combien de puissance de calcul a été utilisée pour l'entraîner ?

L'entraînement a consommé environ 6 × 10¹⁷ FLOP. Cela mesure ce que coûte la production du modèle et ne dit rien sur la rapidité avec laquelle il répond une fois entraîné — la vitesse d'inférence provient de la bande passante mémoire, et non du budget d'entraînement.

03

Unsupervised High-level Feature Learner— Quelle GPU ai-je besoin pour l'exécuter ?

Aucun. C'est un modèle fermé - ses poids n'ont jamais été publiés, il ne peut donc pas être téléchargé ou exécuté sur votre propre matériel à aucun prix. Il n'est accessible que par son fournisseur.

04

Unsupervised High-level Feature Learner— est-ce que c'est open source ?

La licence n'a jamais été enregistrée dans nos données source. Nous considérons une licence non déclarée comme fermée, car une licence non enregistrée n'est pas une licence sur laquelle compter.

05

Unsupervised High-level Feature Learner— combien de paramètres cela a-t-il ?

Il a un nombre de paramètres de 1B. "To answer this, we train a 9-layered locally connected sparse autoencoder with pooling and local contrast normalization on a large dataset of images (the model has 1 billion connections, the dataset has 10 million 200x200 pixel images downloaded from the Internet)". Ce chiffre est le total, et c'est ce qui détermine combien de mémoire le modèle nécessite — environ un demi-gigaoctet par milliard à la compression que la plupart des gens utilisent.

06

Unsupervised High-level Feature Learner— qui l'a créé ?

Il a été publié par Google, basé sur United States of America, une organisation catégorisée comme industry.

07

Unsupervised High-level Feature Learner— quand a-t-il été publié ?

Il a été publié dans July 2012. La capacité par paramètre s'est considérablement améliorée depuis, donc un modèle plus récent de la même taille est souvent le meilleur usage du même matériel.

Source

Publication originale

Dernière mise à jour enregistrée 28 November 2025

L'autre direction

Regardez-le de l'autre côté ?

Cette page commence par le modèle. Si vous possédez déjà une carte et souhaitez savoir tout ce qu'elle exécutera., commencez par le matériel à la place.