NÜWA

Zárt súlyok Microsoft Research,Peking University 870M Paraméterek November 2021

Nincs becslés

Nincs hardver követelmény ennek a modellnek

A modellhez tartozó súlyokat nem tették közzé, így nem tölthető le vagy futtatható a saját hardverén bármilyen méretben. Csak a szolgáltatóján keresztül érhető el, és egyetlen grafikus kártya sem változtat ezen..

Nyilvántartásban

Teljes specifikáció

Minden feljegyzett ezzel a modellel kapcsolatban. A legtöbbje azt írja le, hogyan képezték ki, nem pedig azt, hogyan fut — hasznos kontextus annak megítéléséhez, hogy mennyi munka ment bele, és hogyan viszonyul a más méretben épített modellekhez..

Eredet

Ki építette ezt a modellt, hol, és mikor publikálták.

Szervezet
Microsoft Research,Peking University
Szervezet típusa
Industry,Academia
Ország
United States of America, China
Közölt
24 November 2021
Szerzők
Chenfei Wu, Jian Liang, Lei Ji, Fan Yang, Yuejian Fang, Daxin Jiang, Nan Duan

Mit csinál

A probléma területek, amelyekre a modell készült. Egy modell több mindegyikből hordozhat.

Tartomány
Multimodal, Vision, Image generation, Video, Language
Feladat
Image generation, Video generation, Text-to-image, Text-to-video
Megközelítés
Self-supervised learning

Méret

Mekkora a modell, és mennyi adatot használtak a betanításához. A paraméterek azok a számok, amelyek eldöntik, hogy az adott grafikus kártyára illeszkedik-e.

Paraméterek
870M

Section 4.1

Képzési adatok
5,547,780,000 tokens

we first pre-train N ̈UWA on three datasets: Conceptual Captions [22] for text-to-image (T2I) generation, which includes 2.9M text-image pairs, Mo- ments in Time [26] for video prediction (V2V), which in- cludes 727K videos, and VATEX dataset [43] for text-to- video (T2V) generation, which includes 241K text-video pairs.

Képzés számítás

A modell tanításához végrehajtott aritmetika, lebegőpontos műveletekben mérve. Ez a tanítási futás költségének mértéke, nem pedig annak, hogy mennyire gyorsan válaszol a kész modell.

Képzés számítás
7.2 × 10²¹ FLOP

From AI Tracker: "Compute cost: End of Sec 4.1: "We pre-train on 64 A100 GPUs for two weeks". Half precision FLOPs of A100: 312000000000000 64 gpus *312000000000000 FLOPs *0.3 utilization * 14 day* (24*60*60) seconds / day=7.245988e+21

Hogyan jött létre
Hardware

A tréning futás

Ami fizikailag szükséges volt a betanításhoz: mely chipek, hány, mennyi ideig, és ez mit fogyasztott a falból.

Képzési hardver
NVIDIA A100

Elérhetőség

Hogy meg tudja-e szerezni a modellt és futtatni a saját hardverén, ez dönt arról, hogy alkalmazhatóak-e a lap ezen oldalán feltüntetett grafikus kártya adatok.

Súlyok
Closed — provider access only
Modell hozzáférés
Unreleased
Képzés kód
Unreleased

https://github.com/microsoft/NUWA

Hogyan van besorolva

Címkék a forráshalmazra, amelyeket a figyelemre méltó modellek nyomon követésekor alkalmaznak, és hogy mennyire biztos az adatbevitelben.

Miért követik nyomon
SOTA improvement

"NÜWA achieves state-of-the-art results on text-to-image generation, text-to-video generation, video prediction, etc"

Nyilvántartási bizalom
Confident
Hivatkozások
340

Források

Honnan származik ez a felvétel és mikor ellenőrizték utoljára.

Referencia
NÜWA: Visual Synthesis Pre-training for Neural visUal World creAtion
Utoljára frissítve
1 January 2026

Mit jelentenek a számok

Honnan jött

NÜWA ki lett adva által Microsoft Research,Peking University, az országban rögzítve mint United States of America, alatt November 2021. A kiadó kategóriája alá tartozik industry,Academia.

Működik a területen a Multimodal, Vision, Image generation, Video, Language, és úgy van rögzítve, mint a feladat végrehajtása image generation, Video generation, Text-to-image, Text-to-video.

Súlyait soha nem tették közzé, így csak a szolgáltatóján keresztül érhető el. Nincs grafikus kártya, ami ezt megváltoztatná.

Képzés és származás

A létrehozásához körülbelül összesítő aritmetikára volt szükség. 7.2 × 10²¹ FLOP, hardveren rögzítve NVIDIA A100. Ez a szám azt méri, hogy mennyibe került a modell előállítása, és nincs hatással arra, hogy milyen gyorsan válaszol.

Körülbelül egy korpuszon lett betanítva 5,547,780,000 szöveg tokenjei

A kiválasztási kritériuma: sOTA improvement.

Válaszok

NÜWA — gyakori kérdések

01

NÜWA— Nyílt forráskódú?

Nem. A súlyai nincsenek közzétéve, így csak a tulajdonosa által ellenőrzött szolgáltatásként létezik.

02

NÜWA— Hány paramétere van?

Paraméterszáma 870M. Section 4.1. Ez a szám a teljes összeg, és ez határozza meg, hogy mennyi VRAM-ra van szüksége a modelleknek — körülbelül fél gigabájt milliárdonként a legtöbb ember által használt tömörítési módban.

03

NÜWA— Ki készítette ezt?

Kiadta Microsoft Research,Peking University, alapján United States of America, egy szervezet, amelyet kategorizáltak mint industry,Academia.

04

NÜWA— Mikor adták ki?

Kibocsátották a November 2021. A paraméterenkénti képesség lényegesen javult azóta, így egy újabb, azonos méretű modell gyakran jobb felhasználása a same hardvernek.

05

NÜWA— Mire használják?

Működik a területen a Multimodal, Vision, Image generation, Video, Language, és rögzítve van, hogy kezeli a feladatot image generation, Video generation, Text-to-image, Text-to-video. Ezek azok a területek, amelyek köré tervezték; ezek a szándékot írják le, nem pedig egy szigorú határt.

06

NÜWA— mennyi számítási kapacitást használtak annak a betanításához?

A képzés körülbelül elfogyasztott 7.2 × 10²¹ FLOP, hardveren rögzítve NVIDIA A100. Ez azt méri, hogy mennyibe került a modell előállítása, és semmit nem mond arról, hogy milyen gyorsan válaszol, miután betanult — a következtetési sebesség a memória sávszélességéből származik, nem az edzési költségvetésből.

07

NÜWA— Milyen GPU-ra van szükségem, hogy futtathassam?

Ez egy zárt modell — a súlyait soha nem tették közzé, így nem tölthető le és nem futtatható a saját hardverén semmilyen áron. Csak a szolgáltatóján keresztül érhető el.

Forrás

Eredeti kiadvány

Az utolsó frissítés időpontja 1 January 2026

A másik irány

Másik oldalról nézve?

Ez az oldal a modellel kezdődik. Ha már van kártyád, és szeretnéd tudni, hogy mindent futtat-e, Kezdj a hardverből..