Fraternal dropout + AWD-LSTM 3-layer (PTB)

Zárt súlyok University of Montreal / Université de Montréal,Mila - Quebec AI (originally Montreal Institute for Learning Algorithms) 24M Paraméterek October 2017

Nincs becslés

Nincs hardver követelmény ennek a modellnek

A modellhez tartozó súlyokat nem tették közzé, így nem tölthető le vagy futtatható a saját hardverén bármilyen méretben. Csak a szolgáltatóján keresztül érhető el, és egyetlen grafikus kártya sem változtat ezen..

Nyilvántartásban

Teljes specifikáció

Minden feljegyzett ezzel a modellel kapcsolatban. A legtöbbje azt írja le, hogyan képezték ki, nem pedig azt, hogyan fut — hasznos kontextus annak megítéléséhez, hogy mennyi munka ment bele, és hogyan viszonyul a más méretben épített modellekhez..

Eredet

Ki építette ezt a modellt, hol, és mikor publikálták.

Szervezet
University of Montreal / Université de Montréal,Mila - Quebec AI (originally Montreal Institute for Learning Algorithms)
Szervezet típusa
Academia,Academia
Ország
Canada
Közölt
31 October 2017
Szerzők
Konrad Zolna, Devansh Arpit, Dendi Suhubdy, Yoshua Bengio

Mit csinál

A probléma területek, amelyekre a modell készült. Egy modell több mindegyikből hordozhat.

Tartomány
Language
Feladat
Language modeling

Méret

Mekkora a modell, és mennyi adatot használtak a betanításához. A paraméterek azok a számok, amelyek eldöntik, hogy az adott grafikus kártyára illeszkedik-e.

Paraméterek
24M
Képzési adatok
929,000 tokens
Epochok
520

Képzés számítás

A modell tanításához végrehajtott aritmetika, lebegőpontos műveletekben mérve. Ez a tanítási futás költségének mértéke, nem pedig annak, hogy mennyire gyorsan válaszol a kész modell.

Képzés számítás
7 × 10¹⁶ FLOP

6*24000000*929000*520=6.956352e+16

Elérhetőség

Hogy meg tudja-e szerezni a modellt és futtatni a saját hardverén, ez dönt arról, hogy alkalmazhatóak-e a lap ezen oldalán feltüntetett grafikus kártya adatok.

Súlyok
Closed — provider access only
Modell hozzáférés
Unreleased
Képzés kód
Open source

BSD-3 license: https://github.com/kondiz/fraternal-dropout

Hogyan van besorolva

Címkék a forráshalmazra, amelyeket a figyelemre méltó modellek nyomon követésekor alkalmaznak, és hogy mennyire biztos az adatbevitelben.

Nyilvántartási bizalom
Confident
Benchmark adatok
Fraternal dropout + AWD-LSTM 3-layer (PTB)

Források

Honnan származik ez a felvétel és mikor ellenőrizték utoljára.

Referencia
Fraternal Dropout
Utoljára frissítve
11 February 2026

Mit jelentenek a számok

Honnan jött

Fraternal dropout + AWD-LSTM 3-layer (PTB) ki lett adva által University of Montreal / Université de Montréal,Mila - Quebec AI (originally Montreal Institute for Learning Algorithms), az országban rögzítve mint Canada, alatt October 2017. A kiadó kategóriája alá tartozik academia,Academia.

Működik a területen a Language, és úgy van rögzítve, mint a feladat végrehajtása language modeling.

Ez egy zárt modell: a betanított értékek azoknál maradtak, akik előállították őket, és nincs helyi verzió a futtatáshoz.

Hogyan lett betanítva

A betanításhoz körülbelül egy számítási költségvetés kellett 7 × 10¹⁶ FLOP. Ez a szám azt méri, hogy mennyibe került a modell előállítása, és nincs hatással arra, hogy milyen gyorsan válaszol.

A képzés körülbelül egy korpuszt fogyasztott 929,000 szöveg tokenjei

Válaszok

Fraternal dropout + AWD-LSTM 3-layer (PTB) — gyakori kérdések

01

Fraternal dropout + AWD-LSTM 3-layer (PTB)— Hány paramétere van?

Paraméterszáma 24M. Ez a szám a teljes összeg, és ez határozza meg, hogy mennyi VRAM-ra van szüksége a modelleknek — körülbelül fél gigabájt milliárdonként a legtöbb ember által használt tömörítési módban.

02

Fraternal dropout + AWD-LSTM 3-layer (PTB)— Ki készítette ezt?

Kiadta University of Montreal / Université de Montréal,Mila - Quebec AI (originally Montreal Institute for Learning Algorithms), alapján Canada, egy szervezet, amelyet kategorizáltak mint academia,Academia.

03

Fraternal dropout + AWD-LSTM 3-layer (PTB)— Mikor adták ki?

Kibocsátották a October 2017. A paraméterenkénti képesség lényegesen javult azóta, így egy újabb, azonos méretű modell gyakran jobb felhasználása a same hardvernek.

04

Fraternal dropout + AWD-LSTM 3-layer (PTB)— Mire használják?

Működik a területen a Language, és rögzítve van, hogy kezeli a feladatot language modeling. A modellek gyakran több mint egyet hordoznak mindegyikből, és a címkék a célra, nem pedig a képességek határaira utalnak.

05

Fraternal dropout + AWD-LSTM 3-layer (PTB)— mennyi számítási kapacitást használtak annak a betanításához?

A képzés körülbelül elfogyasztott 7 × 10¹⁶ FLOP. Ez azt méri, hogy mennyibe került a modell előállítása, és semmit nem mond arról, hogy milyen gyorsan válaszol, miután betanult — a következtetési sebesség a memória sávszélességéből származik, nem az edzési költségvetésből.

06

Fraternal dropout + AWD-LSTM 3-layer (PTB)— Milyen GPU-ra van szükségem, hogy futtathassam?

Ez egy zárt modell — a súlyait soha nem tették közzé, így nem tölthető le és nem futtatható a saját hardverén semmilyen áron. Csak a szolgáltatóján keresztül érhető el.

07

Fraternal dropout + AWD-LSTM 3-layer (PTB)— Nyílt forráskódú?

Nem. A súlyai nincsenek közzétéve, így csak a tulajdonosa által ellenőrzött szolgáltatásként létezik.

Forrás

Eredeti kiadvány

Az utolsó frissítés időpontja 11 February 2026

A másik irány

Másik oldalról nézve?

Ez az oldal a modellel kezdődik. Ha már van kártyád, és szeretnéd tudni, hogy mindent futtat-e, Kezdj a hardverből..