Spre deosebire de modelele MoE timpurii (care aveau doar 8 experți mari), DeepSeek folosește 256 de experți granulați. Fiecare token activează strict cei mai potriviți 8 experți.
Beneficiu computațional
- Parametri totali model: 671 miliarde.
- Parametri activați per token: 37 miliarde.
- Latență și cost de calcul identice cu un model mic, dar cu capacitatea intelectuală a unui model gigant.
Eficiență computațională excepțională în timpul generării.
Întrebări & Exemple practice:
Specializarea Celor 256 de Experți Rutabili în DeepSeek-V3Ai o întrebare despre Specializarea Celor 256 de Experți Rutabili în DeepSeek-V3 sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.