Υπολογίστε την TPS του GeForce GTX 950M σε τοπικά AI μοντέλα

NVIDIA 4 GB DDR3 29 GB/s March 2015

Κάθε μοντέλο στον κατάλογό μας αξιολογήθηκε σε σχέση με αυτή την ΚΑΡΤΑ στη διάρκεια του CONTEXT LENGTH και της ελάχιστης ποιότητας που επιλέγετε. Η ταχύτητα είναι μια εκτίμηση για ένα μόνο αίτημα, υπολογισμένη από το MEMORY BANDWIDTH αυτής της ΚΑΡΤΑΣ και το μέγεθος κάθε μοντέλου μόλις συμπιεστεί..

Υπολογίστηκε για αυτήν την κάρτα

97 μοντέλα που μπορεί να εκτελέσει

679 μοντέλα στον κατάλογό μας συνολικά

Το μεγαλύτερο μοντέλο που κρατάει

DeciLM 6B

5.7B · Q3_K_M · 4.9 tok/s

Ταχύτερο μοντέλο

Gemma 3 QAT 1B

10.4 tok/s · 1B

Ποια AI μοντέλα μπορούν να τρέξουν σε μια GeForce GTX 950M?

Ορίστε τις εισόδους, διαβάστε την απάντηση

Περισσότερα συμφραζόμενα σημαίνει περισσότερη μνήμη για την κρυφή μνήμη της συνομιλίας. Η ταχύτητα είναι για μια νέα συνομιλία και δεν αλλάζει με αυτή τη ρύθμιση..

Κρύβει μοντέλα που θα χωρούσαν μόνο αν συμπιεστούν κάτω από αυτό το σημείο.

97 τα μοντέλα ταιριάζουν

Υπολογισμός
Ποσοτικοποίηση Καλά
10.4 tok/s

4–21 · χαμηλή εμπιστοσύνη

Gemma 3 1B 1B Mar 2025 1.8 GB 33k μουσικά κομμάτια Q8_0 Άνετο
10.4 tok/s

4–21 · χαμηλή εμπιστοσύνη

Gemma 3 QAT 1B 1B Apr 2025 1.8 GB 33k μουσικά κομμάτια Q8_0 Άνετο
10.4 tok/s

4–21 · χαμηλή εμπιστοσύνη

HGRN 1B (WT 103) 1B Nov 2023 1.8 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
10.4 tok/s

4–21 · χαμηλή εμπιστοσύνη

LLama 3..2 Typhoon 2 1B 1B Dec 2024 1.8 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
10.4 tok/s

4–21 · χαμηλή εμπιστοσύνη

OLMo-1B 1B Feb 2024 1.8 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
10.4 tok/s

4–21 · χαμηλή εμπιστοσύνη

Pythia-1b 1B Apr 2023 1.8 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
9.6 tok/s

3–19 · χαμηλή εμπιστοσύνη

OpenELM-1.1B 1.1B May 2024 1.9 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
9.4 tok/s

3–19 · χαμηλή εμπιστοσύνη

DeciCoder-1B 1.1B Aug 2023 1.9 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
9.4 tok/s

3–19 · χαμηλή εμπιστοσύνη

SantaCoder 1.1B Jan 2023 1.9 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
9.4 tok/s

3–19 · χαμηλή εμπιστοσύνη

TinyLlama-1.1B (1T token checkpoint) 1.1B Oct 2023 1.9 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
9.4 tok/s

3–19 · χαμηλή εμπιστοσύνη

TinyLlama-1.1B (3T token checkpoint) 1.1B Oct 2023 1.9 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.6 tok/s

3–17 · χαμηλή εμπιστοσύνη

EXAONE 4.0 (1.2B) 1.2B Jul 2025 2.0 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.6 tok/s

3–17 · χαμηλή εμπιστοσύνη

MinerU2.5 1.2B Sep 2025 2.0 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.6 tok/s

3–17 · χαμηλή εμπιστοσύνη

Pleias 1.0 1.2B 1.2B Dec 2024 2.0 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.6 tok/s

3–17 · χαμηλή εμπιστοσύνη

Pleias-RAG-1B 1.2B Apr 2025 2.0 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.4 tok/s

3–17 · χαμηλή εμπιστοσύνη

Llama 3.2 1B 1.2B Sep 2024 2.2 GB 54k μουσικά κομμάτια Q8_0 Άνετο
8.3 tok/s

3–17 · χαμηλή εμπιστοσύνη

MiniCPM-1.2B 1.2B Jun 2024 2.0 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.0 tok/s

3–16 · χαμηλή εμπιστοσύνη

DeepSeek Coder 1.3B 1.3B Jan 2024 2.1 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.0 tok/s

3–16 · χαμηλή εμπιστοσύνη

DeepSeek-VL-1.3B 1.3B Mar 2024 2.1 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.0 tok/s

3–16 · χαμηλή εμπιστοσύνη

DigiRL 1.3B Jun 2024 2.1 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.0 tok/s

3–16 · χαμηλή εμπιστοσύνη

GLA Transformer 1.3B 1.3B Aug 2024 2.1 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.0 tok/s

3–16 · χαμηλή εμπιστοσύνη

Janus 1.3B 1.3B Oct 2024 2.1 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.0 tok/s

3–16 · χαμηλή εμπιστοσύνη

Kosmos-2.5 1.3B Aug 2024 2.1 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.0 tok/s

3–16 · χαμηλή εμπιστοσύνη

Otter 1.3B May 2023 2.1 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο
8.0 tok/s

3–16 · χαμηλή εμπιστοσύνη

Phi-1 1.3B Oct 2023 2.1 GB 131k μουσικά κομμάτια ? Q8_0 Άνετο

Οι ταχύτητες είναι εκτιμήσεις για ένα μόνο αίτημα — μία συνομιλία τη φορά — υπολογισμένες από την μνήμη, το μέγεθος του μοντέλου και την ποσοτικοποίηση. Η πραγματική διακύμανση έξοδου ποικίλλει με τον χρόνο εκτέλεσης συμπερασμάτων και την έκδοσή του. Οι αριθμοί που δημοσιεύονται από τους προμηθευτές υλικού μετρούν πολλές ταυτόχρονες αιτήσεις και είναι πολύ υψηλότεροι..

Σε καταγραφή

GeForce GTX 950M Πλήρης προδιαγραφή

Τα πάντα σε αρχείο για αυτήν την κάρτα, ταξινομημένα κατά πόσο σχετίζονται με τη λειτουργία ενός AI μοντέλου παρά σύμφωνα με το πώς θα το κατέγραφε ένα φύλλο προδιαγραφών. Η ΜΝΗΜΗ έρχεται πρώτη γιατί αποφασίζει το αποτέλεσμα; το υπόλοιπο είναι CONTEXT..

Μνήμη

Οι δύο προδιαγραφές που αποφασίζουν ποιο μοντέλο μπορεί να τρέξει αυτή η ΚΑΡΤΑ και με ποια ταχύτητα. Η ικανότητα καθορίζει ποια μοντέλα ταιριάζουν· το bandwidth καθορίζει πόσα tokens ανά δευτερόλεπτο παράγουν μόλις ταιριάξουν.

Μέγεθος μνήμης
4 GB
Μνήμη εύρους ζώνης
29 GB/s
Τύπος μνήμης
DDR3
Πλάτος διαύλου μνήμης
128 bit
Ρολογιά μνήμης
900 MHz

Το τσιπ

Ποιος επεξεργαστής είναι πάνω στην πλακέτα και πώς κατασκευάστηκε. Ένα μικρότερο μέγεθος διαδικασίας γενικά σημαίνει περισσότερη απόδοση για την ίδια ισχύ.

Γραφικός επεξεργαστής
GM107
Αρχιτεκτονική
Maxwell
Γενιά
GeForce 900M
Μέταλλο
TSMC
Μέγεθος διαδικασίας
28 nm
Τρανζίστορ
1.9 billion
Πυκνότητα τρανζίστορ
12,600 K/mm²
Μέγεθος τσιπ
148 mm²
Πακέτο
FCBGA-908
Απελευθερώθηκε
13 March 2015

Ταχύτητες ρολογιού

Πόσο γρήγορα λειτουργεί ο επεξεργαστής. Αξίζει πολύ λιγότερο εδώ από ό,τι σε ένα gaming benchmark: η δημιουργία κειμένου περιορίζεται από το MEMORY BANDWIDTH, έτσι μια υψηλότερη συχνότητα barely moves το αποτέλεσμα.

Βασική συχνότητα
993 MHz
Ωθήσει ρολογιού
1.12 GHz

Μονάδες Επεξεργασίας

Τι περιέχει το τσιπ. Αυτά οδηγούν την απόδοση γραφικών και έχουν σημασία κυρίως για την επεξεργασία μιας μακράς προτροπής αντί για την παραγωγή της απάντησης.

Μονάδες σκίασης
640
Μονάδες Χαρτογράφησης Υφής
40
Μονάδες εξόδου απόδοσης
16
Ροή πολλών επεξεργαστών
5
L1 κρυφή μνήμη
64 KB
L2 κρυφή μνήμη
2 MB

Θεωρητική Απόδοση

Οι κορυφαίοι ρυθμοί αριθμητικών υπολογισμών που δημοσιεύθηκαν για την κάρτα. Αυτές είναι ανώτατα όρια που καμία πραγματική εργασία δεν φτάνει, και η παραγωγή κειμένου φτάνει μόνο σε ένα μικρό ποσοστό αυτών επειδή περιορίζεται από τη μνήμη αντί για την αριθμητική.

Μονή ακρίβεια (FP32)
1.4 TFLOPS
Διπλή ακρίβεια (FP64)
45 GFLOPS
Ρυθμός εικονοστοιχείων
18 GPixel/s
Ρυθμός υφής
45 GTexel/s

Η πλακέτα

Τι απαιτείται για να εγκαταστήσετε φυσικά και να τροφοδοτήσετε την ΚΑΡΤΑ — οι πρακτικοί περιορισμοί που αποφασίζουν αν ταιριάζει στη μηχανή που ήδη έχετε.

Κατανάλωση ενέργειας (TDP)
75 W
Συνδέσεις ρεύματος
None
Διασύνδεση λεωφορείου
PCIe 3.0 x8
Πλάτος υποδοχής
IGP

Υποστήριξη λογισμικού

Ποιες γραφικές και υπολογιστικές διεπαφές υποστηρίζει η κάρτα. Η δυνατότητα υπολογισμού CUDA είναι αυτή που επηρεάζει την εκτίμηση: κάτω από 7.0 δεν υπάρχουν πυρήνες tensor, και το σύγχρονο λογισμικό εκτίμησης επιστρέφει σε πιο αργούς κωδικούς.

ικανότητα υπολογισμού CUDA
5.0
DirectX
11.0
OpenGL
4.6
Βούλκαν
1.4
OpenCL
3.0
Μοντέλο Σκίασης
5.1

Καταχωρίσεις

Πού να αγοράσω ένα GeForce GTX 950M

Κανένας προμηθευτής δεν καταχωρεί αυτήν την κάρτα αυτή τη στιγμή. Οι καταχωρίσεις προέρχονται από προμηθευτές που τις δημοσιεύουν εδώ απευθείας. — περιηγηθείτε στον κατάλογο προμηθευτών να δεις ποιος πουλάει τι.

Τι σημαίνουν οι αριθμοί

Μνήμη: η προδιαγραφή που αποφασίζει τα πάντα

Μνήμη

4 GB

Εύρος ζώνης

29 GB/s

Μεγαλύτερο μοντέλο

DeciLM 6B

GeForce GTX 950M κρατά μόνο 4 GB του DDR3. Αυτό περιορίζει το μοντέλο στο μικρότερο άκρο του καταλόγου, και ένα μοντέλο πρέπει να χωράει ολόκληρο πριν δημιουργήσει οτιδήποτε. Ένα runtime στην πραγματικότητα παίρνει περίπου 3.6 GB.

Η μνημονική εύρος ζώνης φτάνει 29 GB/s πέρα από ένα λεωφορείο του 128 μπίτ. Η διαύγεια είναι ο πραγματικός περιορισμός αυτής της κάρτας. Κάθε τοκέν απαιτεί την ανάγνωση ολόκληρου του μοντέλου από την VRAM, οπότε ένα μεγάλο μοντέλο θα αισθάνεται αργό εδώ ακόμα και όταν χωράει.

Αυτό προέρχεται από ένα memory clock του 900 MHz. Διεύρυνση του λεωφορείου και αύξηση του ρολογιού είναι οι δύο μοχλοί που έχει ένας κατασκευαστής, γι' αυτό και μια κάρτα με αδιάφορους πυρήνες μπορεί ακόμα να παράγει γρήγορα.

Η πρακτική οροφή είναι DeciLM 6B, 5.7B, συμπιεσμένο σε Q3_K_M και δημιουργώντας γύρω 4.9 tokens ανά δευτερόλεπτο

Το τσιπ και πώς κατασκευάστηκε

GeForce GTX 950M είναι κατασκευασμένο πάνω στον επεξεργαστή γραφικών GM107, χρησιμοποιώντας την αρχιτεκτονική Maxwell από NVIDIA, ως μέρος της γενιάς GeForce 900M.

Το τσιπ κατασκευάζεται από TSMC, σε μια διαδικασία της 28 νμ, με ένα ζάρι που μετράει 148 mm², κρατώντας 1.9 billion Τρανζίστορ. Μια μικρότερη διαδικασία σημαίνει γενικά περισσότερη απόδοση για την ίδια ισχύ, αν και για τα γλωσσικά μοντέλα έχει πολύ λιγότερη σημασία από το υποσύστημα μνήμης.

Δημοσιεύτηκε το March 2015, χονδρικά 11.386303483448 χρόνια πριν. Η υποστήριξη λογισμικού INFERENCE τείνει να ακολουθεί την υλικοτεχνική υποδομή κατά ένα ή δύο χρόνια, οπότε μια κάρτα αυτής της ηλικίας γενικά διαθέτει ώριμους, καλά βελτιστοποιημένους κώδικες που της είναι διαθέσιμοι.

Διαδικασία υπολογισμού, και γιατί έχει λιγότερη σημασία απ' ότι φαίνεται

FP64

45 GFLOPS

Η διάβαση διπλής ακρίβειας φθάνει 45 GFLOPS. Δεν έχει καμία σχέση με την εκτέλεση ενός γλωσσικού ΜΟΝΤΕΛΟΥ — κανένας χρόνος εκτέλεσης συμπερασμού δεν το χρησιμοποιεί — αλλά χωρίζει τα μέρη των κέντρων δεδομένων από τα καταναλωτικά, καθώς τα τελευταία το περιορίζουν σκόπιμα.

Οι ρολόγια τρέχουν από μια βάση του 993 MHz σε μια αύξησηของ 1.12 GHz. Αξίζει πολύ λιγότερο εδώ από ό,τι σε ένα gaming benchmark: η αύξηση των ρολογιών επιταχύνει την αριθμητική, και η αριθμητική δεν είναι αυτό που περιμένει η γενιά.

Κρυφή μνήμη και μονάδες επεξεργασίας

GeForce GTX 950M έχει L1 cache της 64 KB, υποστηριζόμενο από μια L2 cache του 2 MB. Η Cache απορροφά ένα μερίδιο της κίνησης μνήμης που αλλιώς θα έπληττε το κύριο λεωφορείο, το οποίο είναι το μόνο μέρος σε αυτή τη σελίδα όπου ένας αριθμός διαφορετικός από τη bandwidth επηρεάζει ήσυχα την ταχύτητα δημιουργίας - μια μεγάλη L2 επιτρέπει περισσότερα από το working set να παραμένουν κοντά στους πυρήνες.

Υπάρχουν 640 Μονάδες σκίασης, 40 Μονάδες Χαρτογράφησης Υφής, και 16 Μονάδες εξόδου απόδοσης. Αυτά οδηγούν τα γραφικά φορτία εργασίας και συμβάλλουν στην επεξεργασία εντολών, αλλά παραμένουν ανενεργά για μεγάλο μέρος του χρόνου που χρειάζεται ένα μοντέλο για να παράγει μια απάντηση.

Ικανότητα, μέγεθος και εγκατάσταση

Κατανάλωση ενέργειας

75 W

GeForce GTX 950M βαθμολογείται σε 75 W. Η εκτέλεση ενός γλωσσικού μοντέλου κρατά μια κάρτα απασχολημένη σε εκρήξεις παρά συνεχώς — απορροφά έντονα κατά τη διαδικασία παραγωγής και αδρανεί μεταξύ των αιτημάτων — έτσι η διαρκής κατανάλωση κατά τη διάρκεια μιας εργάσιμης ημέρας είναι συνήθως πολύ κάτω από την αναγραφόμενη τιμή.

Η κάρτα καταλαμβάνει igp. Αξίζει να ελεγχθεί σε σχέση με την περίπτωση και την τροφοδοσία που είναι ήδη στη μηχανή, καθώς οι μεγαλύτερες κάρτες χρειάζονται σημαντικά περισσότερα και από τα δύο σε σύγκριση με ό,τι παρέχει ένα τυπικό επιτραπέζιο.

Συνδέεται μέσω PCIe 3.0 x8. Η διεπαφή ρυθμίζει πόσο γρήγορα ένα μοντέλο φορτώνεται από το δίσκο στην κάρτα, όχι πόσο γρήγορα εκτελείται μόλις εκεί, έτσι μια στενότερη σύνδεση κοστίζει μερικά δευτερόλεπτα στην εκκίνηση και τίποτα μετά από αυτό.

Οι ακραίοι

Οι μεγαλύτεροι AI μοντέλα που τρέχουν σε μια GeForce GTX 950M

Τα μεγαλύτερα OPEN WEIGHT μοντέλα που ταιριάζουν σε αυτή την CARD, τα νεότερα πρώτα. Κάθε ένα εμφανίζεται με την καλύτερη συμπίεση που μπορεί να κρατήσει η CARD..

  1. 01 Qwen3.5-4B 4B · Q5_K_M · Feb 2026 4.6 tok/s
  2. 02 Voxtral Mini 4.7B · Q4_K_M · Jul 2025 5.1 tok/s
  3. 03 Typhoon 2.1 Gemma 4B 4B · Q4_K_M · May 2025 6.0 tok/s
  4. 04 Qwen3-4B 4B · Q3_K_M · Apr 2025 7.0 tok/s
  5. 05 Gemma 3 QAT 4B 4B · Q4_K_M · Apr 2025 6.0 tok/s
  6. 06 Gemma 3 4B 4B · Q4_K_M · Mar 2025 6.0 tok/s
  7. 07 Phi-4-Multimodal 5.6B · Q3_K_M · Mar 2025 5.0 tok/s
  8. 08 Minitron 4B 4.2B · Q4_K_M · Nov 2024 5.7 tok/s
  9. 09 XVERSE-MoE-A4.2B 4.2B · Q4_K_M · Apr 2024 5.7 tok/s
  10. 10 DeciLM 6B 5.7B · Q3_K_M · Sep 2023 4.9 tok/s

Οι ταχύτεροι AI μοντέλα σε μια GeForce GTX 950M

Όπου αυτή η ΚΑΡΤΑ παράγει τούβλα γρηγορότερα. Μικρότερα μοντέλα κυριαρχούν εδώ, επειδή η παραγωγή κάθε τούβλου σημαίνει να διαβάζουμε ολόκληρο το μοντέλο από τη μνήμη μία φορά..

  1. 01 Gemma 3 QAT 1B 1B · Q8_0 · 1.8 GB 10.4 tok/s
  2. 02 Gemma 3 1B 1B · Q8_0 · 1.8 GB 10.4 tok/s
  3. 03 LLama 3..2 Typhoon 2 1B 1B · Q8_0 · 1.8 GB 10.4 tok/s
  4. 04 OLMo-1B 1B · Q8_0 · 1.8 GB 10.4 tok/s
  5. 05 HGRN 1B (WT 103) 1B · Q8_0 · 1.8 GB 10.4 tok/s
  6. 06 Pythia-1b 1B · Q8_0 · 1.8 GB 10.4 tok/s
  7. 07 OpenELM-1.1B 1.1B · Q8_0 · 1.9 GB 9.6 tok/s
  8. 08 TinyLlama-1.1B (1T token checkpoint) 1.1B · Q8_0 · 1.9 GB 9.4 tok/s
  9. 09 TinyLlama-1.1B (3T token checkpoint) 1.1B · Q8_0 · 1.9 GB 9.4 tok/s
  10. 10 DeciCoder-1B 1.1B · Q8_0 · 1.9 GB 9.4 tok/s

Βήμα προς βήμα

Πώς να υπολογίσετε τους TOKENS ανά ΔΕΥΤΕΡΟΛΕΠΤΟ ενός GeForce GTX 950M

Δεν χρειάζεται να υπολογίσετε τίποτα με το χέρι — ο υπολογιστής gputps.com σε αυτή τη σελίδα έχει ήδη υπολογίσει για κάθε μοντέλο που μπορεί να κρατήσει αυτή η κάρτα. Η ανάγνωση της απάντησης απαιτεί έξι βήματα..

  1. 01

    Μοντέλο AI που δεν χωράει σε GPU VRAM. Τεταμένη, σχεδόν εκτελέσιμη. Άνετη, τρέχει εύκολα. Ανοικτό βάρος AI μοντέλου που είναι διαθέσιμο στη βάση δεδομένων μας. Νέες GPU κυκλοφορίες. Οριακή μνήμη/δεσμευμένη μνήμη GPU VRAM/εύρος ζώνης. Κάρτα GPU. Μήκος συμφραζομένων AI.

    Ο πίνακας απαριθμεί 97 μοντέλα που αυτή η κάρτα μπορεί να τρέξει. Αναζητήστε με όνομα, ή με μέγεθος — η πληκτρολόγηση 27b ταιριάζει στον αριθμό παραμέτρων ακόμα κι αν το όνομα δεν το αναφέρει ποτέ.

  2. 02

    Εναρμονίστε το πλαίσιο με τη δουλειά σας

    Οι μεγαλύτερες συζητήσεις κοστίζουν VRAM πάνω από τα βάρη. Εναντίον 4 GB έτσι οι ρυθμίσεις αξίζουν να γίνουν σωστά.

  3. 03

    Κλειδώστε τη σύγκριση σε ένα επίπεδο ποιότητας

    Η Συμπίεση είναι αυτό που επιτρέπει σε μεγαλύτερα μοντέλα να χωρέσουν. Ο έλεγχος ποιότητας απορρίπτει οποιοδήποτε μοντέλο χρειάζεται περισσότερη από αυτό που είστε πρόθυμοι να δώσετε.

  4. 04

    Διάβασε την ταχύτητα και την εμβέλεια

    Κάθε ταχύτητα είναι μια εκτίμηση για μια μεμονωμένη συνομιλία, με μια κλίμακα από κάτω της. Η κορυφαία τιμή εδώ είναι 10.4 τόκ/σ σε Gemma 3 QAT 1B. Η ίδια κάρτα και μοντέλο διαφέρει κατά τριάντα έως πενήντα τοις εκατό μεταξύ των χρόνων εκτέλεσης συμπερασμάτων.

  5. 05

    Έλεγξε τη στήλη μνήμης πριν δεσμεύσεις

    Σφιχτό σημαίνει ότι λειτουργεί σήμερα; Άνετο σημαίνει ότι λειτουργεί ακόμα όταν η συνομιλία μεγαλώνει. Συγκρίνετε τις ανάγκες κάθε μοντέλου με βάση το διαθέσιμο. 4 GB.

  6. 06

    Έλεγξε το ίδιο μοντέλο από την άλλη πλευρά

    Κάθε σελίδα μοντέλου επαναλαμβάνει αυτόν τον υπολογισμό για ολόκληρο τον κατάλογο. Αξίζει μια ματιά πριν αποφασίσετε: δείχνει τι άλλο τρέχει το ίδιο μοντέλο, δίπλα σε GeForce GTX 950M.

Απαντήσεις

GeForce GTX 950M — κοινές ερωτήσεις

01

GeForce GTX 950M— πότε κυκλοφόρησε;

Δημοσιεύτηκε το March 2015.

02

GeForce GTX 950M— πόση ισχύς χρησιμοποιεί;

Η αξιολογούμενη ισχύς της κάρτας είναι 75 W. Η δημιουργία κειμένου απαιτεί ένταση σε εκρήξεις και είναι σε κατάσταση αναμονής μεταξύ των αιτημάτων, οπότε η μέση κατανάλωση κατά τη διάρκεια μιας εργάσιμης συνεδρίας είναι κανονικά πολύ κάτω από την αξιολογούμενη τιμή.

03

GeForce GTX 950M— πόσο cache έχει;

Η μνήμη L1 είναι 64 KB, και η L2 cache είναι 2 MB. Η Cache απορροφά μέρος της μνήμης κυκλοφορίας που θα έφτανε αλλιώς στον κύριο διαδικτυακό κόμβο, έτσι μια μεγαλύτερη L2 δίνει μια μέτρια αύξηση στην ταχύτητα γενετικά πέρα από αυτό που προ predicts η μόνο πλά bandwidth.

04

GeForce GTX 950M— υποστηρίζει CUDA;

Ναι. Αναφέρει την ικανότητα υπολογισμού CUDA. 5.0, το οποίο προηγείται των TENSOR CORES. Η δυνατότητα 7.0 και άνω έχει πυρήνες τανυστών, τους οποίους χρησιμοποιεί λογισμικό σύγχρονης inference. Κάτω από αυτό, επιστρέφει σε πιο αργές διαδρομές κώδικα για μοντέλα ποσοτικοποίησης.

05

GeForce GTX 950M— ποια είναι η διεπαφή bus που χρησιμοποιεί;

Χρησιμοποιεί PCIe 3.0 x8. Αυτό διέπει πόσο γρήγορα φορτώνεται ένα μοντέλο στην κάρτα αντί για το πόσο γρήγορα τρέχει μόλις φορτωθεί, οπότε κοστίζει μερικά δευτερόλεπτα κατά την εκκίνηση και τίποτα κατά τη διάρκεια της γεννήσεως.

06

GeForce GTX 950M— είναι καλό για να τρέξετε τοπικά AI μοντέλα;

Η μνήμη του περιορίζει τα μικρότερα μοντέλα, αν και το εύρος ζώνης του σημαίνει ότι η γενιά θα είναι αργή σε μεγαλύτερα μοντέλα. Στην συνολική του λειτουργία είναι 97 των μοντέλων που παρακολουθούμε. Εάν αυτό είναι αρκετό εξαρτάται αποκλειστικά από το ποιο μοντέλο θέλετε — ο παραπάνω πίνακας απαντά σε αυτό απευθείας.

07

GeForce GTX 950M— μπορεί να τρέξει ένα μοντέλο που δεν χωράει στη μνήμη του;

Φορτίο πέρα από την κάρτα 4 GB είναι πιθανό και συνήθως μια ψευδής οικονομία: το ποσοστό μνήμης-συστήματος είναι αρκετά αργό ώστε να κυριαρχεί στο αποτέλεσμα.

08

Θα μπορούσαν δύο GeForce GTX 950M οι κάρτες θα είναι δύο φορές πιο γρήγορες;

Όχι. Μια δεύτερη κάρτα διπλασιάζει τη μνήμη σε 8 GB συνδυασμένης μνήμης, με περίπου την ίδια ταχύτητα γενιάς όπως μία.

09

GeForce GTX 950M— ποια AI μοντέλα μπορεί να εκτελέσει;

97 του 679 Οι ανοιχτού τύπου γλωσσικοί μοντέλοι που παρακολουθούμε ταιριάζουν σε αυτή την κάρτα και μπορούν να εκτελούνται τοπικά. Ο πίνακας σε αυτή τη σελίδα απαριθμεί τον καθένα, με τη μνήμη που χρειάζεται, την ποσοτικοποίηση στην οποία εκτελείται και μια εκτιμώμενη ταχύτητα παραγωγής.

10

GeForce GTX 950M— ποιο είναι το μεγαλύτερο AI μοντέλο που μπορεί να τρέξει;

Το μεγαλύτερο μοντέλο στον κατάλογό μας που χωράει είναι DeciLM 6B σε 5.7B παραμέτρους, συμπιεσμένο σε Q3_K_M. Παράγει περίπου 4.9 δεσμεύσεις ανά δευτερόλεπτο και χρειάζονται περίπου 3.5 GB της μνήμης της κάρτας.

11

GeForce GTX 950M— πόσοι τόκεν ανά δευτερόλεπτο παράγει;

Εξαρτάται από το ΜΟΝΤΕΛΟ. Το πιο γρήγορο ΜΟΝΤΕΛΟ που παρακολουθούμε εδώ είναι Gemma 3 QAT 1B γύρω από 10.4 διακυμάνσεις ανά δευτερόλεπτο, ενώ μεγαλύτερα μοντέλα τρέχουν αναλογικά πιο αργά επειδή κάθε διακυμάνση απαιτεί την ανάγνωση ολόκληρου του μοντέλου από τη μνήμη μία φορά. Οι ταχύτητες είναι εκτιμήσεις για μία μόνο συνομιλία τη φορά.

12

GeForce GTX 950M— πόση μνήμη έχει;

Αυτή η GPU έχει 4 GB του DDR3. Γύρω από το ένα δέκατο είναι δεσμευμένο από την εκτέλεση συμπερασμού και τον οδηγό, αφήνοντας περίπου 3.6 GB διαθέσιμο για ένα μοντέλο και τη συζήτησή του.

13

GeForce GTX 950M— ποια είναι η εύρος ζώνης μνήμης της;

Η μνημονική εύρος ζώνης φτάνει 29 GB/s πέρα από ένα λεωφορείο του 128 μπίτ. Αυτή είναι η μοναδική καλύτερη πρόβλεψη για το πόσο γρήγορα παράγει κείμενο, επειδή η παραγωγή κάθε token σημαίνει την ανάγνωση ολόκληρου του μοντέλου έξω από τη μνήμη μία φορά.

14

GeForce GTX 950M— ποιο τύπο μνήμης χρησιμοποιεί;

Χρησιμοποιεί DDR3 χρονισμένος σε 900 MHz. Οι τύποι HBM βρίσκονται σε επιταχυντές κέντρων δεδομένων και διαθέτουν πολύ περισσότερη εύρυθμη απόδοση από την GDDR που χρησιμοποιείται σε GPU καρτών επιτραπέζιου υπολογιστή, γι' αυτό και δημιουργούν tokens σημαντικά πιο γρήγορα με την ίδια χωρητικότητα.

15

GeForce GTX 950M— ποιος το κατασκευάζει;

Αυτό είναι ένα προϊόν του NVIDIA, με το τσιπ που κατασκευάστηκε από TSMC, σε μια διαδικασία της 28 νμ.

Η άλλη κατεύθυνση

Κοιτάζοντας το από την άλλη πλευρά;

Αυτή η σελίδα ξεκινά από το υλικό. Αν ήδη ξέρετε ποιο ΜΟΝΤΕΛ θέλετε και χρειάζεστε να ξέρετε τι απαιτείται για να το ΤΡΕΞΕΤΕ., Αρχίστε από το ΜΟΝΤΕΛΟ..

Όλες οι GPUs