Spre deosebire de Top-K care folosește un număr fix de tokeni, Top-P (Nucleus Sampling) adaptează numărul de candidați în funcție de certitudinea modelului: dacă modelul este foarte sigur, ia în calcul doar 2 tokeni; dacă este nesigur, ia în calcul 50 de tokeni până când suma probabilităților lor atinge P (ex: 0.9 = 90%).
./build/bin/llama-cli -m model.gguf --top-p 0.9Este cel mai utilizat mecanism de eșantionare în asistenții moderni comerciali.
Întrebări & Exemple practice:
Eșantionarea de Nucleu Top-P (–top-p)Ai o întrebare despre Eșantionarea de Nucleu Top-P (–top-p) sau ai descoperit un truc, prompt sau fragment de cod util? Distribuie-l cu ceilalți membri ai comunității!
Fii primul care pune o întrebare sau distribuie un fragment de cod / prompt!
Nu au fost adăugate încă întrebări sau resurse pentru această pagină. Dacă ai testat un prompt sau ai un snippet util, adaugă-l mai jos pentru comunitate.