E2 TTS

Poids fermés Microsoft 335M Paramètres September 2024

Aucune estimation

Aucun besoin matériel pour ce modèle

Les poids de ce modèle n'ont pas été publiés, il ne peut donc pas être téléchargé ou exécuté sur votre propre matériel, quelle que soit la taille. Il n'est accessible que via son fournisseur, et aucune carte graphique ne change cela.

Enregistrement terminé

Spécification complète

Tout ce qui concerne ce modèle. La plupart décrit comment il a été entraîné plutôt que comment il fonctionne — contexte utile pour évaluer le travail fourni et sa comparaison avec des modèles construits à une échelle différente.

Origine

Qui a construit ce modèle, où et quand il a été publié.

Organisation
Microsoft
Type d'organisation
Industry
Pays
United States of America
Publié
12 September 2024
Auteurs
Sefik Emre Eskimez, Xiaofei Wang, Manthan Thakker, Canrun Li, Chung-Hsien Tsai, Zhen Xiao, Hemin Yang, Zirun Zhu, Min Tang, Xu Tan, Yanqing Liu, Sheng Zhao, Naoyuki Kanda

Ce qu'il fait

Les domaines problématiques pour lesquels le modèle a été conçu. Un modèle peut en porter plusieurs de chacun.

Domaine
Speech
Tâche
Text-to-speech (TTS), Speech synthesis

Taille

Quelle est la taille du modèle et combien de données il a été formé. Les paramètres sont le chiffre qui détermine s'il tient sur une carte graphique donnée.

Paramètres
335M

"The architecture incorporated U-Net [23] style skip connections, 24 layers, 16 attention heads, an embedding dimension of 1024, a linear layer dimension of 4096. The character embedding vocabulary size was 399.5 The total number of parameters amounted to 335 million"

Données d'entraînement
245,760,000,000 tokens

"We utilized the Libriheavy dataset [30] to train our models. The Libriheavy dataset comprises 50,000 hours of read English speech from 6,736 speakers, accompanied by transcriptions that preserve case and punctuation marks." "We also used a proprietary 200,000 hours of training data to investigate the scalability of the E2 TTS model." "All models were trained for 800,000 mini-batch updates with an effective mini-batch size of 307,200 audio frames." Token count estimate: 307,200 × 800,000 = 2…

Calcul de formation

L'arithmétique effectuée pour entraîner le modèle, mesurée en opérations à virgule flottante. C'est une mesure du coût de l'exécution de l'entraînement, et non de la rapidité avec laquelle le modèle fini vous répond.

Calcul de formation
4.9 × 10²⁰ FLOP

6 FLOP / token / parameter * 245760000000 tokens * 335000000 parameters = 4.939776e+20 FLOP

Comment cela a été établi
Operation counting

Disponibilité

Que vous puissiez obtenir le modèle et l'exécuter sur votre propre matériel, ce qui décide si l'une des chiffres de carte graphique sur cette page s'applique.

Poids
Closed — provider access only
Accès au modèle
Unreleased
Code d'entraînement
Unreleased

Comment il est classé

Étiquettes que le jeu de données source applique lors du suivi des modèles notables, et à quel point il est confiant dans l'entrée.

Confiance d'enregistrement
Confident

Sources

D'où provient cet enregistrement et quand a-t-il été vérifié pour la dernière fois.

Référence
E2 TTS: Embarrassingly Easy Fully Non-Autoregressive Zero-Shot TTS
Dernière mise à jour
28 November 2025

Ce que signifient les chiffres

À propos de ce modèle

E2 TTS was published by Microsoft, in United States of America, in September 2024. The organisation is categorised as industry.

It works in Speech, and is recorded as doing text-to-speech (TTS), Speech synthesis.

Ses poids n'ont jamais été publiés, donc on ne peut y accéder que par son fournisseur. Aucun changement de carte graphique ne change cela.

Ce qui a contribué à sa construction

Training it took roughly 4.9 × 10²⁰ FLOP of computation — a measure of what producing the model cost, not of how fast it answers.

It was trained on about 245,760,000,000 tokens of text.

Réponses

E2 TTS — Questions fréquentes

01

When was E2 TTS released?

E2 TTS was published in September 2024. Capability per parameter has improved considerably since, so a newer model of the same size is often the better use of the same hardware.

02

What is E2 TTS used for?

E2 TTS works in Speech, and is recorded as handling text-to-speech (TTS), Speech synthesis. These are the areas it was designed around; they describe intent rather than a hard boundary.

03

How much compute was used to train E2 TTS?

Around 4.9 × 10²⁰ FLOP. That measures what producing the model cost and says nothing about how quickly it answers once trained — inference speed comes from memory bandwidth, not from the training budget.

04

What GPU do I need to run E2 TTS?

None. E2 TTS is a closed model — its weights were never published, so it cannot be downloaded or run on your own hardware at any price. It is reachable only through its provider.

05

Is E2 TTS open source?

No. E2 TTS has not had its weights published, so it exists only as a service controlled by its owner.

06

How many parameters does E2 TTS have?

E2 TTS has 335M parameters. "The architecture incorporated U-Net [23] style skip connections, 24 layers, 16 attention heads, an embedding dimension of 1024, a linear layer dimension of 4096. The character embedding vocabulary size was 399.5 The total number of parameters amounted to 335 million". That figure is the total, and it is what decides how much memory the model needs — roughly half a gigabyte per billion at the compression most people use.

07

Who created E2 TTS?

E2 TTS was published by Microsoft, based in United States of America, categorised as industry.

Source

Publication originale

Dernière mise à jour de l'enregistrement 28 November 2025

Dans l'autre sens

Regardez-la de l'autre côté ?

Cette page commence par le modèle. Si vous possédez déjà une carte et souhaitez connaître tout ce qu'elle pourra exécuter, commencez plutôt par le matériel.