retrieval-quality-kNN-LMs

Zárt súlyok University of Massachusetts Amherst 247M Paraméterek October 2022

Nincs becslés

Nincs hardver követelmény ennek a modellnek

A modellhez tartozó súlyokat nem tették közzé, így nem tölthető le vagy futtatható a saját hardverén bármilyen méretben. Csak a szolgáltatóján keresztül érhető el, és egyetlen grafikus kártya sem változtat ezen..

Nyilvántartásban

Teljes specifikáció

Minden feljegyzett ezzel a modellel kapcsolatban. A legtöbbje azt írja le, hogyan képezték ki, nem pedig azt, hogyan fut — hasznos kontextus annak megítéléséhez, hogy mennyi munka ment bele, és hogyan viszonyul a más méretben épített modellekhez..

Eredet

Ki építette ezt a modellt, hol, és mikor publikálták.

Szervezet
University of Massachusetts Amherst
Szervezet típusa
Academia
Ország
United States of America
Közölt
28 October 2022
Szerzők
Andrew Drozdov, Shufan Wang, Razieh Rahimi, Andrew McCallum, Hamed Zamani, Mohit Iyyer

Mit csinál

A probléma területek, amelyekre a modell készült. Egy modell több mindegyikből hordozhat.

Tartomány
Language
Feladat
Language modeling
Alapmodell
Base LM + kNN LM + Continuous Cache

Méret

Mekkora a modell, és mennyi adatot használtak a betanításához. A paraméterek azok a számok, amelyek eldöntik, hogy az adott grafikus kártyára illeszkedik-e.

Paraméterek
247M
Képzési adatok
103,000,000 tokens

Elérhetőség

Hogy meg tudja-e szerezni a modellt és futtatni a saját hardverén, ez dönt arról, hogy alkalmazhatóak-e a lap ezen oldalán feltüntetett grafikus kártya adatok.

Súlyok
Closed — provider access only
Modell hozzáférés
Unreleased
Képzés kód
Open source

MIT for code: https://github.com/iesl/knnlm-retrieval-quality

Hogyan van besorolva

Címkék a forráshalmazra, amelyeket a figyelemre méltó modellek nyomon követésekor alkalmaznak, és hogy mennyire biztos az adatbevitelben.

Hivatkozások
15
Benchmark adatok
retrieval-quality-kNN-LMs

Források

Honnan származik ez a felvétel és mikor ellenőrizték utoljára.

Referencia
You can’t pick your neighbors, or can you? When and how to rely on retrieval in the kNN-LM
Utoljára frissítve
28 November 2025

Mit jelentenek a számok

Háttér

retrieval-quality-kNN-LMs ki lett adva által University of Massachusetts Amherst, az országban rögzítve mint United States of America, alatt October 2022. Egy olyan szervezetből származik, amelyet kategorizálnak mint academia.

Működik a területen a Language, és úgy van rögzítve, mint a feladat végrehajtása language modeling.

A kiindulópontja egy meglévő alapmodell volt, Base LM + kNN LM + Continuous Cache. Ezért osztja a bázismodell általános formáját és méretét.

Súlyait soha nem tették közzé, így csak a szolgáltatóján keresztül érhető el. Nincs grafikus kártya, ami ezt megváltoztatná.

Hogyan lett betanítva

A tanító készlet kb. futott 103,000,000 szöveg tokenjei

Válaszok

retrieval-quality-kNN-LMs — gyakori kérdések

01

retrieval-quality-kNN-LMs— Mire használják?

Működik a területen a Language, és rögzítve van, hogy kezeli a feladatot language modeling. Ezek azok a területek, amelyek köré tervezték; ezek a szándékot írják le, nem pedig egy szigorú határt.

02

retrieval-quality-kNN-LMs— Milyen GPU-ra van szükségem, hogy futtathassam?

Ez egy zárt modell — a súlyait soha nem tették közzé, így nem tölthető le és nem futtatható a saját hardverén semmilyen áron. Csak a szolgáltatóján keresztül érhető el.

03

retrieval-quality-kNN-LMs— Nyílt forráskódú?

Nem. A súlyai nincsenek közzétéve, így csak a tulajdonosa által ellenőrzött szolgáltatásként létezik.

04

retrieval-quality-kNN-LMs— Hány paramétere van?

Paraméterszáma 247M. Ez a szám a teljes összeg, és ez határozza meg, hogy mennyi VRAM-ra van szüksége a modelleknek — körülbelül fél gigabájt milliárdonként a legtöbb ember által használt tömörítési módban.

05

retrieval-quality-kNN-LMs— Ki készítette ezt?

Kiadta University of Massachusetts Amherst, alapján United States of America, egy szervezet, amelyet kategorizáltak mint academia.

06

retrieval-quality-kNN-LMs— Mikor adták ki?

Kibocsátották a October 2022. A paraméterenkénti képesség lényegesen javult azóta, így egy újabb, azonos méretű modell gyakran jobb felhasználása a same hardvernek.

Forrás

Eredeti kiadvány

Az utolsó frissítés időpontja 28 November 2025

A másik irány

Másik oldalról nézve?

Ez az oldal a modellel kezdődik. Ha már van kártyád, és szeretnéd tudni, hogy mindent futtat-e, Kezdj a hardverből..